码迷,mamicode.com
首页 >  
搜索关键字:flume hdfseventsink 实现分析    ( 1426个结果
生动有趣地讲解Map/Reduce基本原理
Hadoop简介Hadoop就是一个实现了Google云计算系统的开源系统,包括并行计算模型Map/Reduce,分布式文件系统HDFS,以及分布式数据库Hbase,同时Hadoop的相关项目也很丰富,包括ZooKeeper,Pig,Chukwa,Hive,Hbase,Mahout,flume等.这 ...
分类:其他好文   时间:2016-04-18 11:27:43    阅读次数:230
Failed to send producer request with correlation id 2 to broker 0 with
部署Flume在Window环境中,Kafka部署在Linux上,从Flume发送事件到Kafka始终有一下错误,经过长时间在网上搜索终于把问题解决,修改kafka中配置项,#advertised.host.name=<hostnameroutablebyclients>注释去掉,并配置上kafka所在linux的ip地址advertised.host.name=192..
分类:其他好文   时间:2016-04-16 19:37:08    阅读次数:2479
二叉树的先序遍历和后序遍历的应用--输出文件和统计目录大小
一,介绍 本文主要二叉树的两种基本的典型应用: 1) 输出某个文件夹下所有文件名称(可以有子文件夹) 用先序遍历实现 2) 统计某个文件夹的大小(该文件夹下所有文件的大小--用后序遍历实现 二,实现分析 对于问题 1),输出文件名称的过程如下: 如果是文件夹,先输出文件夹名,然后再依次输出该文件夹下 ...
分类:其他好文   时间:2016-04-15 21:38:51    阅读次数:346
Flume结构简要分析
一、Flume介绍 Flume是一个分布式、可靠、和高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。 设计目标: (1) 可靠性 当节点出现故障时,日志能够被传送到其他节点上而不会丢失。Flume提供了三种级别的可靠性保障,从强到弱依次分别为:end-to-end(收到数据agent首先...
分类:Web程序   时间:2016-04-15 12:13:56    阅读次数:259
Hadoop应用开发实战(flume应用开发、搜索引擎算法、Pipes、集群、PageRank算法)
Hadoop是2013年最热门的技术之一,通过北风网robby老师<深入浅出Hadoop实战开发>、<Hadoop应用开发实战>两套课程的学习,普通Java开发人员可以在最快的时间内提升工资超过15000.成为一位完全精通Hadoop应用开发的高端人才。 Hadoop是什么,为什么要学习Hadoop ...
分类:编程语言   时间:2016-04-12 07:04:40    阅读次数:214
BitTorrent协议java实现分析
BitTorrent学习最近做的项目里,利用开源的NanoHttpd搭建了嵌入安卓的服务器。最近要做的一部分工作,就是基于BitTorrent协议的WIFI下载实现。协议介绍普通的HTTP/FTP下载使用TCP/IP协议,BitTorrent协议是架构于TCP/IP协议之上的一个P2P文件传输协议,处于TCP/IP结构的应用层。BitTorrent协议本身也包含了很多具体的内容协议和扩展协议,并在不...
分类:编程语言   时间:2016-04-11 12:30:08    阅读次数:246
Chromium网页渲染调度器(Scheduler)实现分析
在采用线程化渲染方式渲染网页时,Chromium依赖一个调度器协调Main线程和Compositor线程的执行,同时也通过这个调度器决定它们什么时候该执行什么操作。调度器将Main线程和Compositor线程的当前状态记录在一个状态机中,然后通过这个状态机决定下一个要执行的操作。这个操作在满足当前设置条件下是最优的,因此可以使网页渲染更快更流畅。本文接下来就分析Chromium网页调度器的实现。...
分类:Web程序   时间:2016-04-11 01:55:55    阅读次数:439
大数据高薪培训 视频教程 Hadoop HBase Hive Storm Spark Sqoop Flume ZooKeeper Kafka Redis 云计算
培训大数据架构开发! 从零基础到高级,一对一培训![技术QQ:2937765541] 课程体系: 获取视频资料和培训解答技术支持地址 课程展示(大数据技术很广,一直在线为你培训解答!): 获取视频资料和培训解答技术支持地址 ...
分类:Web程序   时间:2016-04-11 01:47:24    阅读次数:155
大数据架构培训 视频教程 Hadoop HBase Hive Storm Spark Sqoop Flume ZooKeeper Kafka Redis 云计算
培训大数据架构开发! 从零基础到高级,一对一培训![技术QQ:2937765541] 课程体系: 获取视频资料和培训解答技术支持地址 课程展示(大数据技术很广,一直在线为你培训解答!): 获取视频资料和培训解答技术支持地址 ...
分类:Web程序   时间:2016-04-11 01:32:22    阅读次数:260
libev实现分析
libev是一个事件驱动库,底层是基于select、epoll、kqueue等I/O复用接口。所谓事件驱动库,就是用户定义一个事件以及改事件发生时调用的函数,该库会监听该事件,并在事件发生时调用相应的函数。 libev提供了很多事件监听器(watcher),最主要的有IO、时间以及信号监听器。当某一 ...
分类:其他好文   时间:2016-04-10 19:25:49    阅读次数:347
1426条   上一页 1 ... 91 92 93 94 95 ... 143 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!