一、什么是Flume? flume 作为 cloudera 开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume 初始的发行版本目前被统称为 Flume OG（original generation），属于 cloudera。但随着 FLume 功能的扩展，Flume OG 代码工程臃肿、 ...
分类：
Web程序 时间：
2016-04-26 00:28:52
阅读次数：
307
前些日子在家突然想看看微信公众号的开发，看了它的通讯机智后发现可以试着模拟出这样一个平台。 微信公众平台的通讯机制： 由此可以看出公众号的实现需要三大部分：客户端（用户部分，也就是微信客户端） 服务端 公众号（实际为动态网页）。 而这里主要的是服务端和客户端两个部分，它们构成了“平台”，而公众号是不 ...
分类：
微信 时间：
2016-04-23 16:28:47
阅读次数：
303
目前java应用日志收集都是采用日志框架(slf4j、apache commons logging)+日志系统（log4j、log4j2、LogBack、JUL等）的方式。而针对在分布式环境需要实时分析统计的日志，一般采用apache flume、facebook scribe等分布式日志收集系统。...
分类：
编程语言 时间：
2016-04-22 19:49:21
阅读次数：
409
下载apache-flume-1.6.0-bin.tar.gz解压tar -zxvf apache-flume-1.6.0-bin.tar.gz 配置cp conf/flume-conf.properties.template conf/flume-conf.properties
cp conf/flume-env.sh.template conf/flume-env.sh
flume-env.sh...
分类：
Web程序 时间：
2016-04-22 19:23:59
阅读次数：
651
一、什么是Flume?Flume作为cloudera开发的实时日志收集系统，受到了业界的认可与广泛应用。Flume初始的发行版本目前被统称为FlumeOG（originalgeneration），属于cloudera。但随着FLume功能的扩展，FlumeOG代码工程臃肿、核心组件设计不合理、核心配置不标准等缺点暴露出来，尤..
分类：
Web程序 时间：
2016-04-22 01:23:48
阅读次数：
320
培训大数据架构开发、挖掘分析！ 从零基础到高级，一对一培训！[技术QQ：2937765541] 课程体系： 获取视频资料和培训解答技术支持地址 课程展示(大数据技术很广，一直在线为你培训解答！)： 获取视频资料和培训解答技术支持地址 ...
分类：
数据库 时间：
2016-04-20 17:53:40
阅读次数：
321
APR连接器的思路和bio，nio的整体架构也是类似的，可以看到下面的整体框图：第一个区别是，对于从Acceptor线程中的socket解析这块，无论是nio还是bio都是在Acceptor线程内直接阻塞执行的，对于APR通道，搞出一个SocketWithOptions的线程，专门执行这个socke... ...
分类：
其他好文 时间：
2016-04-20 17:43:56
阅读次数：
387
主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog,Oozie,Cassandra,Hama,Whirr,Flume,Bigtop,Crunch,Hue等。从2011年开始，中国进入大数据风起云涌的时代，以Hadoop为代表的家族软件..
分类：
其他好文 时间：
2016-04-19 20:20:22
阅读次数：
335
前两天去面试，遇到这个知识点，感觉组织的不是很清晰，所以事后梳理下逻辑。
一、案例情景在service中开启一个下载任务，然后在activity中显示下载进度，如何实现？分析：
这里考察的就是Service如何与Activity进行交互，我们知道开启一个Service服务有两种方法，startService()、bindService()。第一种方法我们直接开启Service进行使用，没有与它进行...
分类：
移动开发 时间：
2016-04-18 17:26:07
阅读次数：
311
./pssh -h ./host/all.txt -P mkdir /usr/local/app ./pssh -h ./host/all.txt -P tar zxf /usr/local/software/apache-flume-1.6.0-bin.tar.gz -C /usr/local/a... ...
分类：
Web程序 时间：
2016-04-18 15:26:34
阅读次数：
369
