码迷,mamicode.com
首页 >  
搜索关键字:flume hdfseventsink 实现分析    ( 1426个结果
Android之十SlidingMenu侧滑菜单的实现分析
Android之十SlidingMenu侧滑菜单的实现分析 SlidingMenu侧滑菜单是一种比较新的设置界面或配置界面的效果,在主界面左滑或者右滑出现设置界面效果,能方便的进行各种操作。很多优秀的应用都采用了这种界面方案,像facebook、人人网、everynote、Google+、网易新闻、知乎日报、有道云笔记等等 侧滑菜单实现原理: 在一个Activity的布局中需要有...
分类:移动开发   时间:2016-05-07 08:11:46    阅读次数:233
Flume-Kafka-Logstash-ElasticSearch-Kibana流程说明
首先说明,各工具的安装就不在这说明了,网上很多,可自行查看。 我们在这里用实例说明各个工具的配置以及最后展示的效果。 假如我们有一批tracklog日志需要用ELK实时展示出来: 一、收集日志,我们使用flume工具 在日志服务器端布置agent发往收集collect,配置如下: agent(可多个) agent.sources = s1 agent.channels...
分类:Web程序   时间:2016-05-06 16:24:34    阅读次数:1001
flume搭建
tar -zxvf apache-flume-1.5.0-bin.tar.gz -C 路径 bin 目录下只有flume-ng conf 目录下有flume-conf.properties.template flume-env.sh.template log4j.properties 重命名 mv flume-env.sh.template flume-env.sh/etc/profile...
分类:Web程序   时间:2016-05-06 15:23:19    阅读次数:202
flume到kafka和hbase配置
# Flume test file# Listens via Avro RPC on port 41414 and dumps data received to the logagent.channels = ch-1agent.sources = src-1agent.sinks = sink-1 ...
分类:Web程序   时间:2016-05-05 19:24:54    阅读次数:854
flume手机日志的几种sources的收集实例
实例1 :类型avro,在flume的conf里面创建一个avro.conf用来测试,如下: a1.sources = r1 a1.sinks = k1 a1.channels = c1# Describe/configure the source a1.sources.r1.type = avro a1.sources.r1.channels = c1 a1.sources.r1.bi...
分类:移动开发   时间:2016-05-03 18:21:47    阅读次数:287
第88讲:Spark Streaming从Flume Poll数据
本节课分成二部分讲解: 一、Spark Streaming on Polling from Flume实战 二、Spark Streaming on Polling from Flume源码 第一部分: 推模式(Flume push SparkStreaming) VS 拉模式(SparkStreaming poll Flume) 采用推模式:推模式的理解就是Flum...
分类:Web程序   时间:2016-05-03 18:15:45    阅读次数:204
【海量数据处理】N个数中找出最大的前K个数
N个数中找出最大的前K个数,需要用小堆实现。分析:由于小堆的堆顶存放堆中最小的数据,可以通过与堆顶数据进行比较,将大数据存放在堆中,注意在每次改变堆顶数据后,进行调堆,使堆顶一直存放整个堆中最小元素。voidAdjustDown(int*a,size_troot,size_tsize)//下调 {//小堆 ..
分类:其他好文   时间:2016-05-03 00:39:03    阅读次数:401
Flume interceptor 使用注意事项
1. 在使用 Regex Filtering Interceptor的时候一个属性是excludeEvents 当它的值为true 的时候,过滤掉匹配到当前正则表达式的一行 当它的值为false的时候,就接受匹配到正则表达式的一行 2. flume interceptors的其它属性 Flume h ...
分类:Web程序   时间:2016-05-01 11:01:40    阅读次数:519
第88课:Spark Streaming从Flume Poll数据案例实战和内幕源码解密
本节课分成二部分讲解: 一、Spark Streaming on Polling from Flume实战 二、Spark Streaming on Polling from Flume源码 第一部分: 推模式(Flume push SparkStreaming) VS 拉模式(SparkStrea ...
分类:Web程序   时间:2016-04-30 14:15:58    阅读次数:932
第87讲:Flume推送数据到SparkStreaming案例实战和内幕源码解密
本期内容: 1. Flume on HDFS案例回顾 2. Flume推送数据到Spark Streaming实战 3. 原理绘图剖析 1. Flume on HDFS案例回顾 上节课要求大家自己安装配置Flume,并且测试数据的传输。我昨天是要求传送的HDFS上。 文件配置: ~/.bashrc: export FLUME_HOME=/usr/lo...
分类:Web程序   时间:2016-04-29 17:54:11    阅读次数:197
1426条   上一页 1 ... 88 89 90 91 92 ... 143 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!