Kafka集群环境搭建步骤 1、环境准备：在win7系统 内存（8G）的硬件环境下，搭建3台centOS虚拟机 1.1给机器配置主机名（ip需要固定） 执行命令：vim /etc/hosts，配置主机名如下： 172.16.60.208 kafka01 172.16.60.211 kafka02 1 ...
分类：
其他好文 时间：
2017-11-17 00:13:04
阅读次数：
180
[TOC] KafkaConsumer是从kafka集群消费消息的客户端。这是kafka的高级消费者，而SimpleConsumer是kafka的低级消费者。何为高级？何为低级？ 我们所谓的高级，就是可以自动处理kafka集群的失败信息，也可以适应kafka集群中消息的分区迁移。这个客户端也可以与服 ...
分类：
其他好文 时间：
2017-11-16 14:21:20
阅读次数：
147
JEESZ-kafka集群安装 spring,springmvc,spring mvc,web开发,java分布式架构,shiro,mybatis,kafka,j2ee分布式架构 愿意了解框架技术或者源码的朋友直接求求交流分享技术：2042849237 分布式的一些解决方案，有愿意了解的朋友可以找... ...
分类：
其他好文 时间：
2017-11-16 11:39:02
阅读次数：
144
Kafka初识 1、Kafka使用背景 在我们大量使用分布式数据库、分布式计算集群的时候，是否会遇到这样的一些问题： 这些场景都有一个共同点： 数据是由上游模块产生，上游模块，使用上游模块的数据计算、统计、分析，这个时候就可以使用消息系统，尤其是分布式消息系统！ 2、Kafka的定义 What is ...
分类：
其他好文 时间：
2017-11-11 00:33:20
阅读次数：
126
好了，本篇开始部署kafka集群 Zookeeper集群搭建 注:Kafka集群是把状态保存在Zookeeper中的，首先要搭建Zookeeper集群(也可以用kafka自带的ZK，但不推荐) 1、软件环境 （3台服务器） 10.0.20.131 10.0.20.132 10.0.20.133 1、 ...
分类：
其他好文 时间：
2017-11-11 00:23:14
阅读次数：
249
kafka分区及副本在broker的分配 部分内容參考自：http://blog.csdn.net/lizhitao/article/details/41778193 以下以一个Kafka集群中4个Broker举例，创建1个topic包括4个Partition，2 Replication；数据Pro ...
分类：
其他好文 时间：
2017-11-10 16:59:29
阅读次数：
169
一、简介 Kafka 是一个实现了分布式的、具有分区、以及复制的日志的一个服务。它通过一套独特的设计提供了消息系统中间件的功能。它是一种发布订阅功能的消息系统。 1、名词介绍 Message 消息，就是要发送的内容，一般包装成一个消息对象。 Topic 通俗来讲的话，就是放置“消息”的地方，也就是说 ...
分类：
Windows程序 时间：
2017-11-05 00:32:36
阅读次数：
1680
1：KafKa的官方网址：http://kafka.apache.org/ 开发流程图，如： 2：KafKa的基础知识： 2.1：kafka是一个分布式的消息缓存系统2.2：kafka集群中的服务器都叫做broker2.3：kafka有两类客户端，一类叫producer（消息生产者），一类叫做con ...
分类：
其他好文 时间：
2017-11-03 16:15:40
阅读次数：
221
由于项目原因，最近经常碰到Kafka消息队列某topic在集群宕机重启后无法消费的情况。碰到这种情况，有三步去判断原因所在： step A：如果用kafka串口（即console-consumer）是可以正常消费该topic，则排除kafka集群出现故障 step B：若平台业务能正常消费其他top ...
分类：
其他好文 时间：
2017-11-01 13:44:38
阅读次数：
221
JEESZ-kafka消息服务平台实现 Kafka,Kafka分布式消息,Kafka分布式消息系统,Kafka集群 愿意了解框架技术或者源码的朋友直接求求交流分享技术：2042849237 分布式的一些解决方案，有愿意了解的朋友可以找我们团队探讨 更多详细源码参考来源：http://minglis... ...
分类：
其他好文 时间：
2017-10-25 13:23:42
阅读次数：
158
