转自：http://blog.csdn.net/honglei915/article/details/37564521原文地址：http://blog.csdn.net/honglei915/article/details/37564521介绍Kafka是一个分布式的、可分区的、可复制的消息系统。它...
分类：
其他好文 时间：
2015-08-16 18:16:02
阅读次数：
110
1.kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据
Step 1: Download the code
Download the
0.8.2.0 release and un-tar it.
> tar -xzf kafka_2.10-0.8.2.0.tgz
> cd kafka_2.10-0.8.2.0
Ste...
分类：
其他好文 时间：
2015-08-16 12:23:45
阅读次数：
179
KAFKA分布式消息系统 2011-08-28 18:32:46分类： LINUXKafka[1]是linkedin用于日志处理的分布式消息队列，linkedin的日志数据容量大，但对可靠性要求不高，其日志数据主要包括用户行为（登录、浏览、点击、分享、喜欢）以及系统运行日志（CPU、内存、磁盘、网络...
分类：
其他好文 时间：
2015-08-14 11:08:43
阅读次数：
146
前阵子从支付宝转账1万块钱到余额宝，这是日常生活的一件普通小事，但作为互联网研发人员的职业病，我就思考支付宝扣除1万之后，如果系统挂掉怎么办，这时余额宝账户并没有增加1万，数据就会出现不一致状况了。上述场景在各个类型的系统中都能找到相似影子，比如在电商系统中，当有用户下单后，除了在订单表插入一条记录...
分类：
其他好文 时间：
2015-08-12 08:53:37
阅读次数：
139
http://www.cnblogs.com/LBSer/p/4715395.html 前阵子从支付宝转账1万块钱到余额宝，这是日常生活的一件普通小事，但作为互联网研发人员的职业病，我就思考支付宝扣除1万之后，如果系统挂掉怎么办，这时余额宝账户并没有增加1万，数据就会出现不一致状况了。 上述场...
分类：
其他好文 时间：
2015-08-09 18:24:37
阅读次数：
434
Kafka是一个分布式的、可分区的、可复制的消息系统。它提供了普通消息系统的功能，但具有自己独特的设计。这个独特的设计是什么样的呢？
首先让我们看几个基本的消息系统术语：
Kafka将消息以topic为单位进行归纳。将向Kafka topic发布消息的程序成为producers.将预订topics并消费消息的程序成为consumer.Kafka以集群的方式运行，可以由一个或多个服...
分类：
其他好文 时间：
2015-08-04 13:37:40
阅读次数：
101
高吞吐的分布式消息系统相当于一个大缓存架构伪分布式的安装tar -xzf kafka_2.10-0.8.1.1.tgz启动ZK bin/zookeeper-server-start.sh config/zookeeper.properties启动服务 bin/kafka-server-start.s...
分类：
其他好文 时间：
2015-07-31 23:29:13
阅读次数：
202
原文:http://www.36dsj.com/archives/25042接上一部分：一共81个，开源大数据处理工具汇总（上），第二部分主要收集整理的内容主要有日志收集系统、消息系统、分布式服务、集群管理、RPC、基础设施、搜索引擎、Iaas和监控管理等大数据开源工具。日志收集系统一、Facebo...
分类：
其他好文 时间：
2015-07-29 13:57:55
阅读次数：
135
以下为简图：省去了分布式存储服务(文件系统)、消息系统等等相关服务....
分类：
Web程序 时间：
2015-07-27 20:29:22
阅读次数：
104
消息系统的作用：异步处理、削减峰值、减少组件之间的耦合。选择消息系统根据业务需要需要考虑以下几个方面：是否持久化吞吐能力高可用分布式扩展能力兼容现有协议易于维护其他，如消息丢失和重复的处理避免单点故障负载均衡常见消息系统协议:STOMPAMQP类似 MEMCACHE 的协议HTTP自定格式1、2 是...
分类：
其他好文 时间：
2015-07-25 14:57:01
阅读次数：
115
