码迷,mamicode.com
首页 >  
搜索关键字:flume hdfseventsink 实现分析    ( 1426个结果
Linux内核--网络栈实现分析(六)--应用层获取数据包(上)
本文分析基于内核Linux 1.2.13原创作品,转载请标明http://blog.csdn.net/yming0221/article/details/7541907更多请看专栏,地址http://blog.csdn.net/column/details/linux-kernel-net.html...
分类:系统相关   时间:2014-11-02 17:56:19    阅读次数:352
Linux内核--网络栈实现分析(一)--网络栈初始化
本文分析基于内核Linux Kernel 1.2.13原创作品,转载请标明http://blog.csdn.net/yming0221/article/details/7488828更多请看专栏,地址http://blog.csdn.net/column/details/linux-kernel-n...
分类:系统相关   时间:2014-11-01 21:43:50    阅读次数:393
flume基本使用
1. 在flume/conf下建一个example文件:将下面的配置信息写到example文件中#配置agent1表示代理名称agent1.sources=source1agent1.sinks=sink1agent1.channels=channel1#配置source1agent1.source...
分类:Web程序   时间:2014-10-30 15:16:08    阅读次数:239
Android recovery UI实现分析
Android recovery模式为何物? 关于这个问题, baidu上已经有无数的答案,不理解的朋友先补习一下。从纯技术角度来讲, recovery和android本质上是两个独立的rootfs,   只是recovery这个rootfs存在的意义就是为android这个rootfs服务,因此被解释为Android系统的一部分。  recovery作为一个简单的r...
分类:移动开发   时间:2014-10-23 16:22:41    阅读次数:181
flume+kafka+hdfs构建实时消息处理系统
flume是一个实时消息收集系统,它定义了多种的source、channel、sink,可以根据实际情况选择。Flume下载及文档:http://flume.apache.org/Kafkakafka是一种高吞吐量的分布式发布订阅消息系统,她有如下特性:通过O(1)的磁盘数据结构提供消息的持久化,这种结构对于即使数以TB的..
分类:Web程序   时间:2014-10-22 18:36:34    阅读次数:338
Flume自定义Source
大家好。 公司有个需求。要求Flumne 从MQ 取消息存储到DFS ,写了Flume自定义的source 。,由于我也是刚接触Flume 。 所以有啥不对的请谅解。 查看了Flume-ng的源码。 一般都是根据不同的场景 extends AbstractSource implements Eve....
分类:Web程序   时间:2014-10-21 10:06:25    阅读次数:593
flume ng 1.3 安装(转)
http://blog.csdn.net/hijk139/article/details/8308224业务系统需要收集监控系统日志,想到了hadoop的flume。经过试验,虽说功能不算足够强大,但基本上能够满足功能需求。Flume 是一个分布式、可靠和高可用的服务日志收集工具,能够和hadoop...
分类:Web程序   时间:2014-10-20 17:10:35    阅读次数:333
WebKit的历史项管理
讲解页面历史项管理的标信,及WebKit实现,分析两个比较隐蔽的问题。...
分类:Web程序   时间:2014-10-19 17:10:19    阅读次数:155
Hadoop日志分析系统启动脚本
Hadoop日志分析系统启动脚本 #!/bin/bash #Flume日志数据的根目录 root_path=/flume #Mapreduce处理后的数据目录 process_path=/process #hive分区时间 partition=`date "+%Y-%m-%d"` #获取前一小时的时间:/YYYY-MM-DD/HH file_path=`date -d "1 hour ...
分类:其他好文   时间:2014-10-16 19:41:13    阅读次数:202
flume发送与接受日志
apache-flume-1.5.0.1-bin.tar.gz日志接收端1.修改配置文件cp flume-conf.properties.template flume-conf.propertiesvim flume-conf.propertiescollector1.sources = AvroI...
分类:Web程序   时间:2014-10-15 23:13:11    阅读次数:271
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!