码迷,mamicode.com
首页 > Web开发 > 详细

向hdfs上传文件,运行程序,查看结果

时间:2020-02-29 20:49:02      阅读:127      评论:0      收藏:0      [点我收藏+]

标签:blocks   文件   注意   下载   进入   soft   set   mapreduce   mapr   

1.建立目录 

hdfs dfs -mkdir -p /data/wc/input

2.上传文件

hdfs dfs -D dfs.blocksize=1048576 -put /setup/data.txt /data/wc/input

3.进入运行程序所在目录

cd /software/hadoop-2.7.7/share/hadoop/mapreduce

4.运行程序

hadoop jar hadoop-mapreduce-examples-2.7.7.jar wordcount /data/wc/input  /data/wc/output 

5.查看目录下的文件

hdfs dfs -ls /data/wc/output

6.查看具体文件内容

hdfs dfs -cat /data/wc/output/part-r-00000

7.下载文件

hdfs dfs -get /data/wc/output/part-r-00000 /setup

 

注意:输出目录“/data/wc/output ”,必须是空目录,否则会报错。

向hdfs上传文件,运行程序,查看结果

标签:blocks   文件   注意   下载   进入   soft   set   mapreduce   mapr   

原文地址:https://www.cnblogs.com/liuys635/p/12384912.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!