import java.util.Random; import java.util.concurrent.LinkedBlockingQueue; class producer { Random rdm = new Random(); void produce( Lin...
分类：
编程语言 时间：
2015-02-12 20:09:01
阅读次数：
216
微软近期Open的职位:Senior Software Engineer-Office Incubation Office China team is looking for experienced engineers to improve consumer experience in China....
分类：
其他好文 时间：
2015-02-03 12:30:35
阅读次数：
184
[1]http://elinux.org/CEC_(Consumer_Electronics_Control)_over_HDMI [2]https://source.android.com/devices/tv/HDMI-CEC.html Android 官网 [3]http://www.quantumdata.com/pdf/CEC_White_Paper.pdf Designin...
分类：
其他好文 时间：
2015-01-26 12:06:57
阅读次数：
148
简单地来说，这个模式能够使多个并行的consumer处理同一个信道中收到的消息，从而使系统能够并发地处理大量消息来优化系统的吞吐量，提高系统的可扩展性和可用性，平衡负载。
Context and Problem
一般来说，一个运行在云端的应用通常都需要处理大量的请求。相比于同步的方式来处理每一个请求来说，一个更加通用的技术是实现一个消息系统来实现异步地处理各个请求。另外，这种策略也能够...
分类：
其他好文 时间：
2015-01-25 11:08:50
阅读次数：
120
最近在使用storm做一个实时计算的项目,Spout需要从 KAFKA 集群中读取数据，为了提高开发效率，直接使用了Storm提供的KAFKA插件。今天抽空看了一下KafkaSpout的源码，记录下心得体会。 KafkaSpout基于kafka.javaapi.consumer.Simpl...
分类：
Web程序 时间：
2015-01-22 12:47:14
阅读次数：
496
问题导读：1.zookeeper在kafka的作用是什么？2.kafka中几乎不允许对消息进行“随机读写”的原因是什么？3.kafka集群consumer和producer状态信息是如何保存的？4.partitions设计的目的的根本原因是什么？一、入门 1、简介 Kafka is a dist.....
分类：
其他好文 时间：
2015-01-20 15:39:15
阅读次数：
285
这周在公司分享会上分享了《Finding the Right Consumer: Optimizing for Conversion in Display Advertising Campaigns》，下面贴出分享的主要内容。
文章参考于：http://www.cs.cmu.edu/~yandongl/papers/wsdm2012.pdf...
分类：
其他好文 时间：
2015-01-18 15:47:28
阅读次数：
185
Kafka的通讯协议
标签:kafka
Kafka的Producer、Broker和Consumer之间采用的是一套自行设计的基于TCP层的协议。Kafka的这套协议完全是为了Kafka自身的业务需求而定制的，而非要实现一套类似于Protocol Buffer的通用协议。本文将介绍这套协议的相关内容。
基本数据类型
定长数据类型：int8,int16,int32和int64，对...
分类：
其他好文 时间：
2015-01-15 20:23:45
阅读次数：
260
Kafka是一个分布式的、可分区的、可复制的消息系统。它提供了普通消息系统的功能，但具有自己独特的设计
Kafka将消息以topic为单位进行归纳。将向Kafka topic发布消息的程序成为producers.将预订topics并消费消息的程序成为consumer.Kafka以集群的方式运行，可以由一个或多个服务组成，每个服务叫做一个broker.
下面来看下如何简单的使用：
...
分类：
其他好文 时间：
2015-01-14 11:06:44
阅读次数：
150
如果你要利用代码来跑kafka的应用，那你最好先把官网给出的example先在单机环境和分布式环境下跑通，然后再逐步将原有的consumer、producer和broker替换成自己写的代码。所以在阅读这篇文章前你需要具备以下前提：1.简单了解kafka功能，理解kafka的分布式原理2.能在分布式...
分类：
其他好文 时间：
2015-01-08 17:16:27
阅读次数：
191
