Kettle是Pentaho的一个组件,主要用于数据库间的数据迁移,到我用过的4.2版,还不支持noSQL,不知道4.4是不是支持了。
Kettle自己有三个主要组件:Spoon,Kitchen,Pan。其中Spoon是一个图形化的界面,用于windows的时候,先设置环境变量:pentaho_java_home,例如:C:\Program Files\Java\jdk1.7.0_25...
分类:
其他好文 时间:
2015-03-03 15:09:42
阅读次数:
108
1、RHCE+RHCA+shell编程+Mysql+Web集群+NoSQL+Hadoop+HBase+openstack2、追春秋3、了解docker说明:RHCE:RedHatCertifiedEngineer的简称,是市场上第一个面向Linux的认证考试RHCA:RedHatCertifiedArchitect的缩写,即红帽认证架构师。红帽认证架构师是红帽公司继红帽认证技师..
分类:
其他好文 时间:
2015-03-03 10:03:28
阅读次数:
189
导读:Apache Hive是一个构建于Hadoop(分布式系统基础架构)顶层的数据仓库,Apache HBase是运行于HDFS顶层的NoSQL(=Not Only SQL,泛指非关系型的数据库)数据库系统。区别于Hive,HBase具备随即读写功能,是一种面向列的数据库。对于刚接触大数据的用户来...
分类:
其他好文 时间:
2015-03-01 13:01:55
阅读次数:
223
在网上查In-Memory NoSQL性能测试的资料时,偶然间发现了这个性能测试工具YCSB,全称为“Yahoo! Cloud Serving Benchmark”。它内置了对常见NoSQL数据库和数据网格产品的支持,如Cassandra、MongoDB、HBase、Redis、Infinispan等等很多的主流产品,而且不仅安装使用简单,还能自由扩展测试数据类型和支持的数据库产品。1 编译安装首...
分类:
其他好文 时间:
2015-02-28 23:03:05
阅读次数:
2152
在报表项目中,报表源数据常常会来自于多种异构数据源。例如:关系型数据库(oracle、db2、mysql),nosql数据库(mongodb),http数据源,hadoop(hive、hdfs)甚至是excel或者文本文件。通常的做法是采用ETL工具,将这些数据源都同步到数据仓库中。但是这样做的问题在于:1、..
分类:
其他好文 时间:
2015-02-27 18:49:13
阅读次数:
245
SQL入门: 在说NoSQL之前先看看sql的发展,数据库的发展经过了无库时代,层次状数据库,网状数据库,关系性数据库,NoSQL数据库。 刚开始数据是直接写入到程序中,并没有数据库的概念,随着数据量的增长,开始出现层次状数据库,程序通过树形结构访问数据,在这种结构下父记录同时拥有多个子记录,但子记...
分类:
数据库 时间:
2015-02-27 18:21:39
阅读次数:
389
1.在官网http://www.mongodb.org/downloads下载mongodb-linux-x86_64-2.6.8.gz,并拷贝到准备安装的文件夹下。
2.解压MongoDb压缩包,并重命名为mongodb:tar -zxvf mongodb-linux-x86_64-2.6.8.gz
mv mongodb-linux-x86_64-2.6.8.gz mongodb3.创建存放数...
分类:
数据库 时间:
2015-02-27 17:11:54
阅读次数:
189
前段时间由于项目需要,开始学习MongoDB,发现MongoDB官网的学习课程非常有帮助。整个教学很有体系,包括:Video、quiz、Homework、Final Exam。历时7周,拿到认证证书的一刻还是有些小激动的。推荐给想学 NoSql(特别是MongoDB)的朋友们,晒一下我的课程内容:
分类:
数据库 时间:
2015-02-27 09:57:46
阅读次数:
133
Redis在设计之初就被定义为可以长时间不间断运行的服务进程,因此大多数系统配置参数都可以在不重新启动的情况下立即生效。即便是当前的持久化模式从AOF切换到RDB也无需重启。在Redis中,我们还有一些和服务器管理相关的命令,我们介绍如下:
(1)config get parameter 主要用于读取服务器的运行时参数,但是并不是所有的配置参数都可以通过该命令进行读取...
分类:
其他好文 时间:
2015-02-24 12:36:38
阅读次数:
157
首先简单介绍下Redis中的复制:
(1)同一个master可以同步多个slave。
(2)slave同样可以接受其他slaves的连接和同步请求,这样可以有效的分担master的同步压力。
(3)master server是以非阻塞的方式为slaves提供服务的,所以在master-slave同步期间,客户端仍然可以提交查询或修改请求。
(4)slave...
分类:
其他好文 时间:
2015-02-24 12:34:10
阅读次数:
126