Amazon’s Dynamo [9] and Facebook’s Cassandra [13], relax the consistency model,and offer only eventual consistency. Others such as HBase [1] and BigTa... ...
分类:
数据库 时间:
2016-05-09 22:03:20
阅读次数:
653
NoSQL简介 介绍redis前,我想还是先认识下NoSQL,即not only sql, 是一种非关系型的数据存储,key/value键值对存储。现有Nosql DB 产品: Redis/MongoDB/Memcached/Hbase/Cassandra/ Tokyo Cabinet/Voldem ...
1.Cassandra操作本文档操作都是在单数据中心,Vnode上操作1.1.添加节点到集群中1.1.1.添加非seed单节点1.在新节点上安装Cassandra,但不要启动2.修改cassandra.yaml文件:cluster_name–新节点加入集群名称listen_address/rpc_address–新节点IPseed_provider–集群seeds列表3..
分类:
其他好文 时间:
2016-05-04 19:24:15
阅读次数:
495
1、cassandra 准备 启动cqlsh, 2、spark cassandra conector jar包 新建空项目,使用sbt,引入connector,打包为spark-cassandra-connector-full.jar 这步的意义在于:官方的connector包没有将依赖打进去,所以 ...
分类:
其他好文 时间:
2016-04-24 18:28:43
阅读次数:
194
主要介绍Hadoop家族产品,常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa,新增加的项目包括,YARN,Hcatalog,Oozie,Cassandra,Hama,Whirr,Flume,Bigtop,Crunch,Hue等。从2011年开始,中国进入大数据风起云涌的时代,以Hadoop为代表的家族软件..
分类:
其他好文 时间:
2016-04-19 20:20:22
阅读次数:
335
Gossip是一个P2P的协议,在Cassandra集群中的节点利用它交换相互间的信息。名叫gossip的进程在集群中每秒交换数据的节点多达3个以上,由于节点交换了自己和相关节点间的信息,所以节点很快就可以知道集群中的其他节点(就是一个一传十、十传百的概念)。gossip消息是有版本的,..
分类:
其他好文 时间:
2016-04-04 06:59:06
阅读次数:
237
Snitch决定了节点属于哪个数据中心和机架。Snitch通知Cassandra网络拓扑以便请求被有效的路由,并且允许Cassandra在服务器增加到数据中心或机架的时候能够分发副本。特别的,复制策略如何放置副本是基于新snitch提供的信息。Cassandra不会把副本放到一个机架里面(如果机架断电..
分类:
其他好文 时间:
2016-04-04 06:57:26
阅读次数:
193
在Cassandra中,数据分布和复制是同时进行的。数据通过表来组织,通过主键标识——它决定了数据被存储到哪个节点。副本就是数据行的拷贝。当数据在第一次写入的时候,也就作为第一份副本。影响复制的因素:Virtualnodes(虚拟节点):分配数据所有权到物理机Partitioner(分割..
分类:
其他好文 时间:
2016-04-04 06:56:44
阅读次数:
2216
在前面的一篇文章《图形数据库Neo4J简介》中,我们介绍了一种非常流行的图形数据库Neo4J的使用方法。而在本文中,我们将对另外一种类型的NoSQL数据库——Cassandra进行简单地介绍。 接触Cassandra的原因与接触Neo4J的原因相同:我们的产品需要能够记录一系列关系型数据库所无法快速
分类:
其他好文 时间:
2016-03-21 01:32:40
阅读次数:
262
Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flu
分类:
其他好文 时间:
2016-03-20 21:14:09
阅读次数:
253