转:http://www.cnblogs.com/Orgliny/p/5526159.html 1、zookeeper搭建 Kafka集群依赖zookeeper,需要提前搭建好zookeeper zookeeper快速搭建推荐地址:http://nileader.blog.51cto.com/138 ...
分类:
其他好文 时间:
2018-01-27 13:31:00
阅读次数:
388
1.下载安装包 2.解压安装包 3.进入到kafka的config目录修改server.properties文件 进入后显示如下: 修改log.dirs,基本上大部分都是默认配置 kafka依赖zookeeper保存一些meta信息,所以这些需要配置 分发安装包到其他节点上 scp -r .... ...
分类:
其他好文 时间:
2018-01-27 00:31:04
阅读次数:
161
前言 storm和kafka集群安装是没有必然联系的,我将这两个写在一起,是因为他们都是由zookeeper进行管理的,也都依赖于JDK的环境,为了不重复再写一遍配置,所以我将这两个写在一起。若只需一个,只需挑选自己选择的阅读即可。 这两者的依赖如下: Storm集群 :JDK1.8 , Zooke ...
分类:
其他好文 时间:
2018-01-26 22:47:00
阅读次数:
233
Kafka集群对消息的保存是根据Topic进行归类的,由消息生产者(Producer)和消息消费者(Consumer)组成,另外,每一个Server称为一个Broker(经纪人)。对于Kafka集群而言,Producer和Consumer都依赖于ZooKeeper来保证数据的一致性。 在每条消息输送 ...
分类:
其他好文 时间:
2018-01-26 12:38:36
阅读次数:
1715
一、broker的迁移1.查看zookeeper和kafka启动情况[root@slave1 ~]# pssh -h hostlist -i 'jps'
[1] 22:08:11 [SUCCESS] 20.0.5.12
3492 QuorumPeerMain
8140 Jp
分类:
其他好文 时间:
2018-01-22 13:01:02
阅读次数:
219
需求:? 阿里云ECS服务器上部署了Kafka伪集群,要求内网其他机器访问时broker走内网网卡,外部用户访问均走公网网卡IP:? 内网:10.130.10.10? ? ? ? ? ?外网:12.12.12.12解决方法:? ? ???
??&nb
分类:
其他好文 时间:
2018-01-16 18:01:39
阅读次数:
241
简述 在搭建HyperLedger Fabric环境的过程中,我们会用到一个configtx.yaml文件(可参考Hyperledger Fabric 1.0 从零开始(八)——Fabric多节点集群生产部署),该配置文件主要用于构建创世区块(在构建创世区块之前需要先创建与之对应的所有节点的验证文件 ...
分类:
其他好文 时间:
2018-01-15 20:20:59
阅读次数:
3343
测试环境:系统:CentOS6.5x86_64JDK:javaversion1.8.0_121kafka:kafka_2.11-1.0.0.tgzzookeeper:3.4.5ip:192.168.49.161(我这里在一台机上部署整套环境)kafka名词解析:Broker:Kafka集群包含一个或多个服务器,这种服务器被称为brokerTopic:每条发布到Kafka集群的消息都有一个类别,这个
分类:
其他好文 时间:
2018-01-15 16:41:10
阅读次数:
1179