码迷,mamicode.com
首页 >  
搜索关键字:wordcount    ( 912个结果
Storm概念、原理详解及其应用(一)BaseStorm
本文借鉴官文,添加了一些解释和看法,其中有些理解,写的比较粗糙,有问题的地方希望大家指出。写这篇文章,是想把一些官文和资料中基础、重点拿出来,能总结出便于大家理解的话语。与大多数“wordcount”代码不同的是,并不会有如何运行第一storm代码等内容,只有在运行完代码后,发现需要明白:“知其然, ...
分类:其他好文   时间:2017-06-15 23:37:55    阅读次数:299
云计算-MapReduce
Hadoop示例程序WordCount详解及实例http://blog.csdn.net/xw13106209/article/details/6116323 hadoop中使用MapReduce编程实例(转)http://eric-gcm.iteye.com/blog/1807468 【mapre ...
分类:其他好文   时间:2017-06-13 22:40:05    阅读次数:148
Hadoop Mapreduce之WordCount实现
1.新建一个WCMapper继承Mapper public class WCMapper extends Mapper<LongWritable, Text, Text, LongWritable> { public class WCMapper extends Mapper<LongWritabl ...
分类:其他好文   时间:2017-06-11 15:40:38    阅读次数:224
php通过shell调用Hadoop的方法
1.php代码(index.php) <!DOCTYPE html> <html> <!-- <style> body{background-color:red} </style> --> <!-- <style type="text/css"> --> <!-- body { background ...
分类:Web程序   时间:2017-06-09 19:15:34    阅读次数:254
初学Hadoop之图解MapReduce与WordCount示例分析
Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,MapReduce则为海量的数据提供了计算。 HDFS是Google File System(GFS)的开源实现,MapReduce是Google MapReduce的开源实现。 HDFS和MapRed ...
分类:其他好文   时间:2017-06-09 14:14:09    阅读次数:254
Hadoop之WordCount详解
花了好长时间查找资料理解、学习、总结 这应该是一篇比较全面的MapReduce之WordCount文章了 耐心看下去 1,创建本地文件 在hadoop-2.6.0文件夹下创建一个文件夹data,在其中创建一个text文件 再在当前文件夹中创建一个apps文件夹,方便后续传jar包 将文本文件传到HD ...
分类:其他好文   时间:2017-06-04 12:54:01    阅读次数:212
kafka+storm+hbase
kafka+storm+hbase实现计算WordCount。 (1)表名:wc (2)列族:result (3)RowKey:word (4)Field:count 1、解决: (1)第一步:首先准备kafka、storm和hbase相关jar包。依赖如下: (2)将kafka发来的数据通过lev ...
分类:其他好文   时间:2017-05-29 20:00:24    阅读次数:355
debian下 Hadoop 1.0.4 集群配置及运行WordCount
说明:我用的是压缩包安装,不是安装包 官网安装说明:http://hadoop.apache.org/docs/r1.1.2/cluster_setup.html,繁冗,看的眼花...大部分人应该都不是按照这个来的...按照这个做我相信也会碰到各种问题 精简版安装说明:http://www.linu ...
分类:其他好文   时间:2017-05-28 18:48:18    阅读次数:183
hibench学习
hibench包含几个hadoop的负载 micro benchmarksSort:使用hadoop randomtextwriter生成数据,并对数据进行排序。 Wordcount:统计输入数据中每个单词的出现次数,输入数据使用hadoop randomtextwriter生成。 TeraSort ...
分类:其他好文   时间:2017-05-27 15:26:50    阅读次数:404
ApplicationMaster是如何启动container并通信
ApplicationMaster是如何启动container并通信 hadoop的关键进程 http://blog.csdn.net/jediael_lu/article/details/46386773 当wordcount程序传入两个元文件时启动了两个map task ,可以看到两个jps进程 ...
分类:移动开发   时间:2017-05-21 10:54:21    阅读次数:186
912条   上一页 1 ... 52 53 54 55 56 ... 92 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!