storm操作zookeeper的主要函数都定义在命名空间backtype.storm.cluster中（即cluster.clj文件中）。 backtype.storm.cluster定义了两个重要protocol：ClusterState和StormClusterState。clojure中的p...
分类：
其他好文 时间：
2014-08-30 13:48:29
阅读次数：
154
Zookeeper使用了一种称为Zab（Zookeeper Atomic Broadcast）的协议作为其一致性复制的核心，据其作者说这是一种新发算法，其特点是充分考虑了Yahoo的具体情况：高吞吐量、低延迟、健壮、简单，但不过分要求其扩展性。下面将展示一些该协议的核心内容：另，本文仅讨论Zooke...
分类：
其他好文 时间：
2014-08-29 23:58:58
阅读次数：
596
1.Tachyon简介Tachyon是一个高容错的分布式文件系统，允许文件以内存的速度在集群框架中进行可靠的共享，就像Spark和 MapReduce那样。通过利用信息继承，内存侵入，Tachyon获得了高性能。Tachyon工作集文件缓存在内存中，并且让不同的 Jobs/Queries以及框架都能...
分类：
其他好文 时间：
2014-08-27 18:32:08
阅读次数：
454
storm操作zookeeper的主要函数都定义在命名空间backtype.storm.cluster中（即cluster.clj文件中）。backtype.storm.cluster定义了两个重要protocol：ClusterState和StormClusterState。clojure中的pr...
分类：
其他好文 时间：
2014-08-26 22:38:32
阅读次数：
354
zk不是使用maven管理的。将zk的src下的代码导入eclipse，lib下的jar包导入工程。QuorumPeerMain类的main方法是入口，启动了zk的server，参数是conf文件的路径，例如：org.apache.zookeeper.server.quorum.QuorumPeer...
分类：
其他好文 时间：
2014-08-26 19:21:56
阅读次数：
152
Zookeeper是Apache的一个开源项目，在集群管理中十分常用。它的集群搭建也十分简单，只需要简单的配置，集群的各个节点会完成自行通讯，自动选取Leader等。...
分类：
其他好文 时间：
2014-08-26 11:47:46
阅读次数：
262
一直对zookeeper的应用和原理比较迷糊，今天看一篇文章，讲得很通透，分享如下：场景一有这样一个场景：系统中有大约100w的用户，每个用户平均有3个邮箱账号，每隔5分钟，每个邮箱账需要收取100封邮件，最多3亿份邮件需要下载到服务器中(不含附件和正文)。用20台机器划分计算的压力，从多个不同.....
分类：
其他好文 时间：
2014-08-26 00:13:25
阅读次数：
529
很多人都苦于如何学习新知识，并害怕尝试，可能是这些人没有体验过学习新技能的乐趣。我在PtMind的实习期间，开始学习新框架Zookeeper，本文根据这段时间的项目实战经验，总结了该如何学习新技能的一些技巧...
分类：
其他好文 时间：
2014-08-25 19:18:04
阅读次数：
162
前言 ZooKeeper是Hadoop家族的一款高性能的分布式协作的产品。在单机中，系统协作大都是进程级的操作。分布式系统中，服务协作都是跨服务器才能完成的。在ZooKeeper之前，我们对于协作服务大都使用消息中间件，随...
分类：
其他好文 时间：
2014-08-25 17:23:04
阅读次数：
297
看了你的问题， 我还特意的查看了ZooKeeper的启动脚本代码。ZooKeeper启动脚本没有加任何参数，也就是使用jvm默认的。如果想要加大ZooKeeper的JVM使用内存。可以在更改{ZK_HOME}/bin/zkServer.sh，大约在109-110行。?12nohup $JAVA "-...
分类：
其他好文 时间：
2014-08-24 10:13:02
阅读次数：
249
