1.在三台服务器上搭建ZooKeeper环境 详细步骤见ZK笔记 2.在四台服务器上搭建Solr单机版环境 详细步骤见Solr笔记09 3.将某一个Solrhome的Collection下的conf上传至Zookeeper java -classpath C:\Tomcat\webapps\solr... ...
分类:
其他好文 时间:
2017-03-10 22:02:18
阅读次数:
141
3、kafka+logstash整合logstash1.5以后已经集成了对kafka的支持扩展,可以在conf配置中直接使用 vim /etc/logstash/conf.d/pay.conf input { kafka{ zk_connect => "your zookeeper address: ...
分类:
其他好文 时间:
2017-03-10 19:09:43
阅读次数:
371
zookeeper客户端使用查询指令1../zkCli.sh -timeout 5000 -server 192.168.108.128:2181 链接zk服务器2.ls:列出某个节点下所有子节点的信息 ls / 跟目录下子节点3.stat:查询某个节点的状态 state node,看不到当前节点存 ...
分类:
其他好文 时间:
2017-03-05 14:25:29
阅读次数:
166
为保证服务的稳定性和持续性,在公司的项目中搭建集群是必不可少的。 1.环境准备 我的三台zk服务分别在192.168.254.122,192.168.254.123,192.168.254.124 wget http://www.apache.org/dist//zookeeper/zookeepe ...
分类:
其他好文 时间:
2017-02-25 12:09:32
阅读次数:
193
工作中使用的场景: 工作中使用dubbo微服务,其中注册中心是由zk提供的,于是课余时光就读了此本zk经典之作 节点名为java接口的类名 节点下包括了服务提供者,消费者等子节点 提供者: 消费者: 由于是最底层微服务,所以消费的注册的比较多 zk的特点: 分布式一致性的解决方案,包括:顺序一致性, ...
分类:
其他好文 时间:
2017-02-23 00:29:31
阅读次数:
212
分布式应用系统中,经常会用到zk,比如dubbo注册中心,kafka分布式集群等都用到zk这一工具。除了这些用来做分布式集群外,zk还有那西应用场景事我们可以使用到该工具的呢?所以接下来就是我们要了解的重点了。 首先在使用zk的各种应用之前,我们需要了解zk 的相关功能模块,这样才能让我们更清晰的了 ...
分类:
其他好文 时间:
2017-02-15 00:14:52
阅读次数:
256
storm stream计算.实时性。 master/slavenimbus //mastersupervisor //work node //zk spout //龙头,源源不断产生数据 nextTuple() bolt //接头. tuple //List<> storm.yaml zkserv ...
分类:
其他好文 时间:
2017-02-10 21:56:52
阅读次数:
327
HBase中删除一张表 先disable ‘tableName’ 再drop ‘tableName’来删除表 问:如果region非常多(但没有访问量了),对线上会有什么影响吗? 答:disable只是改了一下ZK里面table的状态。drop也不是现场就把hfile删掉了,只是迁移到.archiv ...
分类:
其他好文 时间:
2017-02-08 11:54:42
阅读次数:
494
niubi-job的框架设计是非常简单实用的一套设计,去掉了很多其它调度框架中,锦上添花但并非必须的组件,例如MQ消息通讯组件(kafka等)。它的框架设计核心思想是,让每一个jar包可以相对之间独立的运行,并且由zk辅助进行集群中任务的调度。 接下来,咱们就一步一步的来看下niubi-job整个的 ...
分类:
其他好文 时间:
2017-01-27 07:05:12
阅读次数:
306
https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/ 修改配置文件: zk设置为奇数: zookeeper有这样一个特性:集群中只要有过半的机器是正常工作的,那么整个集群对外就是可用的。也就是说如果有2个zookeeper,那么只要有1个死了z ...
分类:
其他好文 时间:
2017-01-26 22:16:14
阅读次数:
337