1. 数据库的分类:关系型数据库,非关系型数据库(Nosql) 2.非关系型数据库: 键值型数据库:redis 等。 列式存储数据库: hbase 等。 文档型数据库 : mongoDB 等。 图形数据库 : infoGirid 等。 3.为什么学习noSql? 发红包,并发量为15W,10亿,0. ...
分类:
其他好文 时间:
2017-05-17 11:58:28
阅读次数:
128
Transformation处理的数据为Key-Value形式的算子大致可以分为:输入分区与输出分区一对一、聚集、连接操作。输入分区与输出分区一对一mapValuesmapValues:针对(Key,Value)型数据中的Value进行Map操作,而不对Key进行处理。
方框代表RDD分区。a=>a+2代表只对( V1, 1)数据中的1进行加2操作,返回结果为3。源码: /**
* P...
分类:
其他好文 时间:
2015-07-12 00:20:08
阅读次数:
112
背景
在前三篇文章中已经介绍了NoSQL中属于聚合模型的三种数据库:键值型、文档型、列族型。下面针对三种聚合数据模型的共同点和不同点加以分析以便很好的来认识掌握各自的特点。
相同点
三种面向聚合的数据模型的共同点是,他们都是用聚合这一概念,而且聚合中都有一个可以查找其内容的索引键。在集群上运行时,聚合都是重点环节,因为数据库必须保证将聚合内的数据存在同一节点上。聚合还是”更新“操作的最小数据...
分类:
数据库 时间:
2015-01-23 21:38:01
阅读次数:
221
Redis
是一个高性能的key-value数据库。Redis的出现,很大程度补偿了memcached这类keyvalue存储的不足,在部分场合可以对关系数据库起到很好的补充作用。Redis本质上也是一种键值数据库的,但它在保持键值数据库简单快捷特点的同时,又吸收了部分关系数据库的优点。从而使它的位...
分类:
数据库 时间:
2014-05-26 14:17:42
阅读次数:
341