Kafka是什么？ 是一个分布式消息系统 类JMS消息队列，结合JMS中的两种模式，可以有多个消费者主动拉取数据，在JMS中只有点对点模式才有消费者主动拉取数据。 kafka是一个生产-消费模型。 一些名词： Producer：生产者，只负责数据生产，生产者的代码可以集成到任务系统中。数据的分发策略 ...
分类：
其他好文 时间：
2017-05-13 16:57:03
阅读次数：
187
Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发，之后成为Apache项目的一部分。Kafka是一个分布式的，可划分的，冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。 在大数据系统中，常常会碰到一个问题，整个大数据是由各个子系统组成，数据需要在各个子系统中高性能，低 ...
分类：
其他好文 时间：
2017-04-28 16:08:58
阅读次数：
267
转自：http://www.jianshu.com/p/453c6e7ff81c 分布式消息系统作为实现分布式系统可扩展、可伸缩性的关键组件，需要具有高吞吐量、高可用等特点。而谈到消息系统的设计，就回避不了两个问题： RocketMQ作为阿里开源的一款高性能、高吞吐量的消息中间件，它是怎样来解决这两 ...
分类：
其他好文 时间：
2017-04-16 11:06:30
阅读次数：
186
转自：http://www.oschina.net/translate/kafka-design 参与翻译(4人)：fbm, 飞翔的猴子, Khiyuan, nesteaa 感谢这些同志们的辛勤工作，翻译的真不错，目前见到的最好的Kafka中文文章 Kafka是一个高吞吐量分布式消息系统。linke ...
分类：
其他好文 时间：
2017-03-03 16:28:25
阅读次数：
510
Kafka是如何实现高吞吐率的 原创 2016-02-27 杜亦舒 性能与架构 Kafka是分布式消息系统，需要处理海量的消息，Kafka的设计是把所有的消息都写入速度低容量大的硬盘，以此来换取更强的存储能力，但实际上，使用硬盘并没有带来过多的性能损失kafka主要使用了以下几个方式实现了超高的吞吐 ...
分类：
其他好文 时间：
2017-01-08 03:36:39
阅读次数：
175
消息中间件MessageQuene 解耦且可扩展：业务复杂度的提升带来的也是耦合度的提高，消息队列在处理过程中间插入了一个隐含的、基于数据的接口层，两边的处理过程都要实现这一接口。这允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束。 冗余：有些业务在处理过程中如果失败了，数据在未 ...
分类：
其他好文 时间：
2016-12-15 14:19:32
阅读次数：
203
备注：1.如果您此前未接触过RocketMQ，请先阅读附录部分，以便了解RocketMQ的整体架构和相关术语2.文中的MQServer与Broker表示同一概念 分布式消息系统作为实现分布式系统可扩展、可伸缩性的关键组件，需要具有高吞吐量、高可用等特点。而谈到消息系统的设计，就回避不了两个问题： R ...
分类：
其他好文 时间：
2016-11-11 11:44:10
阅读次数：
161
1、为什么要有Kafka？ [出自 Hrq] Kafka是一个消息系统， 原本开发自LinkedIn，用作LinkedIn的活动流（activity stream）和运营数据处理管道（pipeline）的基础。现在主要用作数据管道（data pipeline）和消息系统 Kafka出现的原因： l ...
分类：
其他好文 时间：
2016-11-10 21:29:55
阅读次数：
223
备注：1.如果您此前未接触过RocketMQ，请先阅读附录部分，以便了解RocketMQ的整体架构和相关术语2.文中的MQServer与Broker表示同一概念 分布式消息系统作为实现分布式系统可扩展、可伸缩性的关键组件，需要具有高吞吐量、高可用等特点。而谈到消息系统的设计，就回避不了两个问题： 消... ...
分类：
其他好文 时间：
2016-09-27 19:27:36
阅读次数：
694
摘要 Kafka是由LinkedIn开发并开源的分布式消息系统，因其分布式及高吞吐率而被广泛使用，现已与Cloudera Hadoop，Apache Storm，Apache Spark集成。本文介绍了Kafka的创建背景，设计目标，使用消息系统的优势以及目前流行的消息系统对比。并介绍了Kafka的 ...
分类：
其他好文 时间：
2016-09-13 20:46:05
阅读次数：
242
