搭建前先统一时间，关闭防火墙，使用的jar包版本是1.6.0的服务配置有两种方式第一种：具体步骤如下：1.将jar包传至node1上，解压至根目录2.更改目录名，使用如下命令：mv apache-flume-1.6.0-bin /home/install/flume-1.63.进入flume-1.6...
分类：
Web程序 时间：
2016-01-12 21:28:49
阅读次数：
305
1.安装软件包linux：rpm-ivhzabbix-2.2.11-1.el6.x86_64.rpmzabbix-agent-2.2.11-1.el6.x86_64.rpmwindows：直接将软件包拷贝到指定目录mdC:\zabbix_agents_2.2.9.winxcopyzabbix_agents_2.2.9.winC:\zabbix_agents_2.2.9.win/E/H/Y2.修改配置文件中的Server和Hostname如果不修..
分类：
其他好文 时间：
2016-01-11 22:20:07
阅读次数：
272
美团的日志收集系统负责美团的所有业务日志的收集，并分别给Hadoop平台提供离线数据和Storm平台提供实时数据流。美团的日志收集系统基于Flume设计和搭建而成。《基于Flume的美团日志收集系统》将分两部分给读者呈现美团日志收集系统的架构设计和实战经验。第一部分架构和设计，将主要着眼于日志收集系...
分类：
Web程序 时间：
2016-01-11 17:50:24
阅读次数：
248
1 $user_agent = $_SERVER['HTTP_USER_AGENT']; 2 $mobile_agents = Array("240x320","acer","acoon","acs-","abacho","ahong","airness","alcatel","amoi","a.....
分类：
移动开发 时间：
2016-01-11 11:47:30
阅读次数：
170
转自：http://www.aboutyun.com/thread-9216-1-1.html使用Storm处理事务型实时计算需求时的几处难点：http://blog.sina.com.cn/s/blog_6ff05a2c0101ficp.html最近搞日志处理，注意是日志处理，如果用流计算处理一些...
分类：
Web程序 时间：
2016-01-10 22:39:12
阅读次数：
219
压缩包下载地址http://www.linux-ha.org/wiki/Downloads[root@localhostsrc]#tarzxvf
resource-agents-3.9.6.tar.gz[root@localhostsrc]#cdresource-agents-3.9.6[root@localhostresource-agents-3.9.6]#
./autogen.shautoreconf:Enteringdirectory`.‘autoreconf:configure.ac:..
分类：
其他好文 时间：
2016-01-06 12:10:20
阅读次数：
152
Heartbeat由glue,heartbeat,agents三部分组成，因此我们需要安装分别安装，下面是安装之前必须安装的一些工具。yuminstallgccflexbisonnet-snmpOpenIPMIpythonyuminstallgccgcc-c++autoconfautomakelibtoolglib2-devellibxml2-develbzip2-devele2fsprogs-devellibxslt-devellib..
分类：
其他好文 时间：
2016-01-06 12:09:37
阅读次数：
569
Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方（可定制）的能力。目前属于apache的一个子项目。 一般来说，部署到服务...
分类：
Windows程序 时间：
2016-01-06 11:39:03
阅读次数：
8147
上周把安卓日志手机的客户端sdk完成跑通，这周开始调试日志服务器端。使用flume进行日志收集，然后转kafka。在测试的时候总是发现漏掉一些event，后来才知道对 channel 和 sink 的使用有误。当多个sink使用同一个channel时，event是会分流共同消耗的，而不是每个sink...
分类：
Web程序 时间：
2016-01-05 18:40:42
阅读次数：
197
https://www.quora.com/Why-does-flume-take-more-resource-CPU-when-file-channel-is-used-compared-to-when-memory-channel-is-usedIn case of File channel ,...
分类：
Web程序 时间：
2015-12-25 18:56:56
阅读次数：
149
