码迷,mamicode.com
首页 > 其他好文 > 详细

Hadoop上简单运行WordCount

时间:2018-09-04 19:10:42      阅读:158      评论:0      收藏:0      [点我收藏+]

标签:配置   拷贝   新建   dac   1.2   wordcount   导出   alt   ips   

我们先搭建本地环境

准备的两个工具

技术分享图片

将winutils中的两个文件拷贝

技术分享图片技术分享图片

配置环境变量

技术分享图片

将日志文件拷贝到我们新建的Eclipse中的Maven项目中

技术分享图片技术分享图片

编写Mapper

技术分享图片

编写Reduce

技术分享图片

编写主类

技术分享图片

我们来运行一下

我们先打一个JAR包

技术分享图片技术分享图片

我导出到本地项目中了

技术分享图片

将包上传到我们的虚拟机中

技术分享图片

上传我们的测试文件

技术分享图片

我们运行一下

技术分享图片技术分享图片

我们查看一下浏览器

技术分享图片

虚拟机查看一下

技术分享图片

Hadoop上简单运行WordCount

标签:配置   拷贝   新建   dac   1.2   wordcount   导出   alt   ips   

原文地址:https://www.cnblogs.com/bqwzy/p/9586096.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!