kafka的相关操作脚本 1、创建Topic./kafka-topics.sh --zookeeper cc13-141:2182 --topic mytopic --replication-factor 1 --partitions 1 --create 2、Topic列表./kafka-topi ...
分类:
其他好文 时间:
2020-01-12 20:03:55
阅读次数:
73
本文记录一下kafka多机多Broker(集群)的基本配置,在上篇的基础上进行,上篇配置在192.168.7.151上,本篇在152上。 一、在服务器192.168.7.152上配置两个Broker 1、将151上的kafka远程拷贝到152上 [root@localhost local]# scp ...
分类:
其他好文 时间:
2020-01-12 16:42:11
阅读次数:
102
0:关闭Kafka 1:登录zookeeper客户端 [root@xsyf zookeeper01]# ./bin/zkCli.sh (1)查看topic信息 ls /brokers/topics (2)删除所有topic deleteall /brokers/topics 2:删除kafka日志文 ...
分类:
其他好文 时间:
2020-01-12 15:20:11
阅读次数:
74
原文地址 https://medium.com/hulu-tech-blog/how-hulu-uses-influxdb-and-kafka-to-scale-to-over-1-million-metrics-a-second-1721476aaff5 Hulu如何使用InfluxDB和Kafk ...
分类:
数据库 时间:
2020-01-12 15:07:30
阅读次数:
89
现在开发过程中,很多的实现某一些功能的工具,都是类似的服务器-客户端结构,即C-S架构,例如消息队列的KAFKA,文件存储的EasticSearch,包括我们日常工作中的数据库,他都是一种C-S架构,其本质上来说都是一种 存储-读取的操作,只是在很多时候,B端不仅仅实现了单一的存储功能,例如KAFK ...
分类:
其他好文 时间:
2020-01-12 09:18:50
阅读次数:
66
1.顺序的方式存储数据; 2.批量发送; 3.零拷贝; 来源:咕泡学院 ...
分类:
其他好文 时间:
2020-01-11 20:46:27
阅读次数:
103
1.消息发送机制 Kafka的ack机制。 当producer向leader发送数据时,可以通过request.required.acks参数来设置数据可靠性的级别: 1(默认):这意味着producer在ISR中的leader已成功收到的数据并得到确认后发送下一条message。如果leader宕 ...
分类:
其他好文 时间:
2020-01-11 20:15:43
阅读次数:
92
0 安装docker(略) 1. 安装docker-compose 下载安装文件 curl -L https://github.com/docker/compose/releases/download/1.24.0/docker-compose-`uname -s`-`uname -m` -o /u ...
分类:
其他好文 时间:
2020-01-11 18:51:29
阅读次数:
133
1. 首先zookeeper是什么 zookeeper是一个开放源代码的分布式应用程序协调服务,可以把它看成是整个集群的管理者,监视者。 2. zookeeper能做什么 它可以实现诸如分布式应用配置管理、统一命名服务、状态同步服务、集群管理等功能。 3. zookeeper服务与kafka集群的联 ...
分类:
其他好文 时间:
2020-01-11 16:56:06
阅读次数:
322