什么时间使用高级应用？ 针对一个消息读取多次 在一个process中，仅仅处理一个topic中的一组partitions 使用事务，确保每个消息只被处理一次 使用高级应用（调用较底层函数）的缺点？ ????SimpleConsumer需要...
分类：
编程语言 时间：
2014-08-08 13:01:46
阅读次数：
340
由于项目需要，最近对storm进行了预研，安装与使用方式网上有很多示例，在此记录一下，备忘。 一、storm简介 ????Storm的术语包括Stream、Spout、Bolt、Task、Worker、Stream Grouping和Topology。S...
分类：
其他好文 时间：
2014-08-06 12:04:11
阅读次数：
409
1 背景 最近由于项目需要，需要使用kafka的producer。但是对于c++，kafka官方并没有很好的支持。 在kafka官网上可以找到0.8.x的客户端。可以使用的客户端有C版本客户端，此客户端虽然目前看来还较为活跃，但是代码问题还是较多的，而且对于c++的支持并不是很好。 还有c++版本，...
分类：
其他好文 时间：
2014-08-06 01:42:30
阅读次数：
407
Spark应用开发实践性非常强，很多时候可能都会将时间花费在环境的搭建和运行上，如果有一个比较好的指导将会大大的缩短应用开发流程。
本篇主要讲述如何运行KafkaWordCount，这个需要涉及Kafka集群的搭建，还是说越仔细越好。
分类：
其他好文 时间：
2014-08-02 23:13:04
阅读次数：
267
前端时间写了个随笔 log4net.NoSql +ElasticSearch 实现日志记录 ，因项目原因需要把日志根java平台的同事集成采用logstash+kibana+elasticsearch+redis结构实现日志统计分析，所以需要一个将log4net日志输出到redis的组件。没有找到现...
分类：
Web程序 时间：
2014-08-01 13:21:35
阅读次数：
491
openfire 访问 user service 插件 访问不到安照说明文档，我访问创建用户的url 如下http://127.0.0.1:9090/plugins/userservice/userservice?type=add&secret=bigsecret&username=kafka&pa...
分类：
其他好文 时间：
2014-08-01 10:46:01
阅读次数：
152
Kafka集群配置比较简单，为了更好的让大家理解，在这里要分别介绍下面三种配置
单节点：一个broker的集群单节点：多个broker的集群多节点：多broker集群
一、单节点单broker实例的配置
1.首先启动zookeeper服务
Kafka提供了一个简单的zookeeper配置文件来帮助启动zookeeper实例，用下面这个命令即可，首先进入Kafka的安装...
分类：
其他好文 时间：
2014-07-31 20:59:27
阅读次数：
334
起因：公司使用的是Ucloud的云主机服务，今天上午突然被告知有一台服务器的出口流量激增，对外发包量短时间内达到了100万，而且都是UDP类型的，第一感觉就是：诶呀，莫不是被黑了，被当肉鸡了呀！探究：立马登录对应的服务器，首先使用iftop查看流量状况可以看出出口流量好吓人..
分类：
其他好文 时间：
2014-07-30 03:29:24
阅读次数：
289
本文是参考logstash官方文档实践的笔记，搭建环境和所需组件如下：Redhat 5.7 64bit / CentOS 5.xJDK 1.6.0_45logstash 1.3.2 (内带kibana)elasticsearch 0.90.10redis 2.8.4搭建的集中式日志分析平台流程如下：...
分类：
其他好文 时间：
2014-07-29 21:48:12
阅读次数：
527
原文来自于:http://blog.csdn.net/whxaing2011/article/details/18237733本文主要介绍如下内容： 1、ElasticSearch的安装(Windows 和 Linux) 2、ElasticSearch插件安装 3、ElasticSearch源码集成...
分类：
其他好文 时间：
2014-07-23 15:10:16
阅读次数：
300
