kakfka架构图： 理解kafka需要理解三个问题。 1.producer,broker,consumer，ZK的工作模式。 broker，ZK是作为一个后台服务,而producer和consumer是作为一个SDK提供给开发者进行开发用。 2.producer和consumer的交互类型。 一般 ...
分类：
其他好文 时间：
2018-04-21 16:14:13
阅读次数：
140
1.一共三个节点(zk服务器集群规模不小于3个节点),要求服务器之间系统时间保持一致。 2. 先去zookeeper官网下载zookeeper的安装包，并将zookeeper通过工具上传到服务器。上传zk 进行解压： tar -zxvf zookeeper-3.4.5.tar.gz 重命名： mv ...
分类：
其他好文 时间：
2018-04-17 19:35:07
阅读次数：
155
集群环境：nn1，view和dn1三节点部署的zookeeper集群，gezookeeper进程均已启动hbaseweb页面显示zk_dump信息如下日志输出信息如下：shell>tail-f/var/log/zookeeper/zookeeper.log2018-04-1609:56:20,000[myid:3]-INFO[ProcessThread(sid:3cport:-1)::Pre
分类：
Web程序 时间：
2018-04-16 14:32:13
阅读次数：
341
前言：在集群环境下使用Motan需要依赖外部服务发现组件，目前支持consul或zookeeper，但是工作中最常用的是zookeeper，所以这里以zookeeper作为注册中心 ! 一、zookeeper的安装和启动 说明：这里以单机集群的方式来作为注册中心 ①.首先下载zk的tar.gz包，放 ...
分类：
其他好文 时间：
2018-04-14 00:39:02
阅读次数：
254
storm中worker、executor、task之间的关系 理清一下worker、executor、task、supervisor、nimbus、zk这几个之间的关系 先来看一张图 （图片来自：http://www.cnblogs.com/foreach-break/p/storm_worker ...
分类：
其他好文 时间：
2018-04-13 12:08:07
阅读次数：
245
客户端启动，把配置文件，配置项存到仓库，等到服务端启动，从服务端拉取数据；服务端更新，则通过zk通知客户端，客户端知道更新后，会从服务端拉取最新的配置文件，如果更新的是redis配置，则需要写回调函数重启redis，不写，则要重启项目；更新其它的一些参数不需要重启项目；另外zk最好配成集群模式，这样可以做到高可用，一个主服务端挂了，会选举另外一个从的作为主服务端。
分类：
其他好文 时间：
2018-04-09 17:19:25
阅读次数：
185
前言 关于dubbo这里就不多说了，想了解更多关于dubbo的请移步到 "dubbo官网" 。文章中涉及的代码都在我的Github:https://github.com/nyvi/dubbo。 服务注册中心 这里选用zookeeper为注册中心 首先你需要在 "ZooKeeper官网" 下载一个zk ...
分类：
编程语言 时间：
2018-04-08 21:15:20
阅读次数：
667
原来namenode只有一个，所以存在单点风险 后来改用主从namenode，主挂了，自动切换到被namenode 一个高可用系统中，所有组件都要是高可用的，下面这个系统里面 zk，zkfc和journalnode都是高可用的 怎么做到自动切换？ 通过zookeeper和zkfc(zookeeper ...
分类：
其他好文 时间：
2018-04-08 15:57:17
阅读次数：
169
背景 原来学习 ZK 时, 我是在本地搭建的伪集群, 虽然说使用起来没有什么问题, 但是总感觉部署起来有点麻烦. 刚好我发现了 ZK 已经有了 Docker 的镜像了, 于是就尝试了一下, 发现真是爽爆了, 几个命令就可以搭建一个完整的 ZK 集群. 下面我简单记录一下使用 Docker 搭建 ZK ...
分类：
其他好文 时间：
2018-04-07 11:28:36
阅读次数：
239
ZAB协议 介绍 1、zab协议是为分布式协调服务zookpeer专门设计的一种支持崩溃恢复的原子广播协议 2、在zookeeper中主要依赖ZAB协议来实现数据一致性，基于该协议zk实现了一种主备模式的系统架构来保证集群中各个副本之间数据的一致性。具体就是zk使用一个单一的主进程来接收并处理客户端 ...
分类：
其他好文 时间：
2018-04-04 00:35:12
阅读次数：
490
