分布式架构是中心化的设计，就是一个主控机连接多个处理节点,因此保证主控机高可用性十分关键.分布式锁是解决该问题的较好方案,多主控机抢一把锁.Zookeeper就是一套分布式锁管理系统,用于高可靠的维护元数据....
分类：
其他好文 时间：
2014-08-01 13:50:51
阅读次数：
230
最近在考虑分布式环境下配置中心实现。
对于配置中心很难设计。
光用Zookeeper吧，发现一是跨语言支持不好，需要大量跨语言支持的开发，而且没办法在上面增加大量的算法和逻辑。
如果在Zookeeper前面加一层服务的话，又怕成为单点压力。
下面是我画的一个架构图，希望大家帮忙看看，踊跃讨论。...
分类：
其他好文 时间：
2014-08-01 02:28:51
阅读次数：
244
Kafka集群配置比较简单，为了更好的让大家理解，在这里要分别介绍下面三种配置
单节点：一个broker的集群单节点：多个broker的集群多节点：多broker集群
一、单节点单broker实例的配置
1.首先启动zookeeper服务
Kafka提供了一个简单的zookeeper配置文件来帮助启动zookeeper实例，用下面这个命令即可，首先进入Kafka的安装...
分类：
其他好文 时间：
2014-07-31 20:59:27
阅读次数：
334
本日志由系统自动生成。
从7月14日起便按照心想事成的节奏进入了实验室。打酱油。周末又去学活值班，生活的框架还是很不错的。
1、基于Hadoop的Flume，zooKeeper，这些东西算是明白了个大概。
2、第一周大概学习了javascript、jquery、css、ci框架（php）这些基本的东...
分类：
其他好文 时间：
2014-07-30 00:41:42
阅读次数：
279
Zookeeper是hadoop的一个子项目，虽然源自hadoop，但是我发现zookeeper脱离hadoop的范畴开发分布式框架的运用越来越多。今天我想谈谈zookeeper，本文不谈如何使用zookeeper，而是zookeeper到底有哪些实际的运用，哪些类型的应用能发挥zookeeper的优势，最后谈谈zookeeper对分布式网站架构能产生怎样的作用。
Zookeeper是针...
分类：
其他好文 时间：
2014-07-29 21:55:32
阅读次数：
294
再分布式系统中，ACL(Access Control)十分重要；Zookeeper也提供了十分好用的ACL接口，下面我记录一下在nodejs下如何实现zookeeper的访问控制。
Zookeeper的ACL通常表示为：Scheme:Id:Permission，即Scheme,Id,Permission三个部分。其中，Scheme表示使用何种方式来进行访问控制，Id代表用户，Perm...
分类：
其他好文 时间：
2014-07-29 12:57:37
阅读次数：
266
最近研究了下NameNodeHAAutomaticFailover方面的东西，当ActiveNN因为异常或其他原因不能正常提供服务时，处于Standby状态的NN就可以自动切换为Active状态，从而到达真正的高可用NNHAAutomaticFailover架构图为了实现自动切换，需要依赖ZooKeeper和ZKFC组件，ZooKeeper主要用来..
分类：
其他好文 时间：
2014-07-26 03:27:38
阅读次数：
392
ZooKeeper是Apache提供的，分布式服务协调系统，应用比较广泛，...
分类：
其他好文 时间：
2014-07-23 18:06:15
阅读次数：
139
用python连接zookeeper时，在终端里，一直会有zookeeper的日志冒出来，这样会很烦。2014-07-22 10:06:19,544:10474(0x7fd459406700):ZOO_WARN@zookeeper_interest@1557: Exceeded deadline b...
分类：
编程语言 时间：
2014-07-22 22:43:34
阅读次数：
1423
一：搭建JStorm环境（三个机器组成的集群）1. 搭建Zookeeper集群2. 安装java1.7和python 2.6，因为JStorm是由大量的java和python编写。3. 安装JStorm-0.9.3.1。4. JStorm需要tomcat来展现UI，所以需要安装tomcat。二：写完TopK_on_JStorm的第一个版本（项目地址），整个项目提供一个简单的topk计算流程，由并发度为1的ScoreProduceSpout提供随机数数据（id，score），并发度为4的ComputeBolt...
分类：
Web程序 时间：
2014-07-22 14:47:04
阅读次数：
279
