在报表项目中，报表源数据常常会来自于多种异构数据源。例如：关系型数据库（oracle、db2、mysql），nosql数据库（mongodb），http数据源，hadoop（hive、hdfs）甚至是excel或者文本文件。通常的做法是采用ETL工具，将这些数据源都同步到数据仓库中。但是这样做的问题在于：1、..
分类：
其他好文 时间：
2015-02-27 18:49:13
阅读次数：
245
SQL入门： 在说NoSQL之前先看看sql的发展，数据库的发展经过了无库时代，层次状数据库，网状数据库，关系性数据库，NoSQL数据库。 刚开始数据是直接写入到程序中，并没有数据库的概念，随着数据量的增长，开始出现层次状数据库，程序通过树形结构访问数据，在这种结构下父记录同时拥有多个子记录，但子记...
分类：
数据库 时间：
2015-02-27 18:21:39
阅读次数：
389
Pivotal Pivots 开源大数据处理的核心组件Pivotal 今天宣布将其大数据套件的三个核心组件开源，同时商业版本继续提供更高级特性和商业支持服务。这三个开源的组件分别是：GemFire 内存中 NoSQL 数据库HAWQ 大规模并行 SQL 分析处理引擎Greenplum DB 大规模并...
分类：
其他好文 时间：
2015-02-24 12:34:07
阅读次数：
151
一、简介NoSQL（NotOnlySQL），泛指非关系型的数据库。随着互联网web2.0网站的兴起，传统的关系数据库在应付web2.0网站，特别是超大规模和高并发的SNS类型的web2.0纯动态网站已经显得力不从心，暴露了很多难以克服的问题，而非关系型的数据库则由于其本身的特点得到了非常迅速..
分类：
数据库 时间：
2015-02-22 00:37:08
阅读次数：
240
cassandra是一个基于kv的nosql数据库，但是自己弄了一套类似slq的cql语法，用起来很有sql的感觉.对于用户，首先先看看有没有好的管理工具基于cql的查询工具自带的cqlsh，除了是cmd，我觉得没有什么缺点了别的gui工具，在cql方面，离这个cqlsh差远了集群管理工具自带的no...
分类：
其他好文 时间：
2015-02-20 18:33:32
阅读次数：
155
??
事务处理
Redis对事务的支持目前还比较简单。Redis只能保证一个client发起的事务中的命令可以连续的执行，而中间不会插入其他client的命令。当一个client在一个连接中发出multi命令时，这个连接会进入一个事务上下文，该连接后续的命令不会立即执行，而是先放到一个队列中，当执行exec命令时，redis会顺序的执行队列中的所有命令。
...
分类：
数据库 时间：
2015-02-15 20:37:49
阅读次数：
375
??
Redis高级实用特征
安全性（登录授权和登录后使用auth授权）
设置客户端连接后进行任何其他指定前需要使用的密码。
警告：因为redis速度相当快，所以在一台比较好的服务器下，一个外部的用户可以在一秒中进行150k次的密码尝试，这意味着你需要指定非常非常强大的密码来防止暴力破解。
修改密码只需要在我们的配置文件中修改下面参数：
...
分类：
数据库 时间：
2015-02-15 01:04:59
阅读次数：
340
??
Redis常用命令
Redis提供了丰富的命令对数据库和各种数据库类型进行操作，这些命令可以再Linux终端使用。
键值相关命令：
Keys:返回满足给定pattern的所有key
用表达式*表示取出所有的key
127.0.0.1:6379> keys *
1) "age"
2) "name"...
分类：
数据库 时间：
2015-02-14 16:16:15
阅读次数：
308
??
sets类型及操作
Set是集合，它是string类型的无序集合。set是通过hash
table实现的，添加，删除和查找复杂度都是0（1）。对集合我们可以取并集、交集、差集。通过这些操作我们可以实现sns中的好友推荐和blog的tag功能。
sadd:向集合中添加一个元素，通名称为key的set中添加元素。
[toto...
分类：
数据库 时间：
2015-02-13 13:27:39
阅读次数：
306
??
lists类型及操作
List是一个链表结构，主要功能室push,pop、获取一个范围的所有值等等，操作中key理解为链表的名字。Redis的list类型其实就是一个每个元素都是string类型的双向链表。我们可以通过push、pop操作从链表的头部或者尾部添加删除元素，这样list既可以作为栈，又可以作为队列。
lpush:在key对应list的头...
分类：
数据库 时间：
2015-02-12 16:14:27
阅读次数：
168
