码迷,mamicode.com
首页 > 其他好文 > 详细

hadoop 3.x 配置日志功能

时间:2018-08-18 22:24:44      阅读:423      评论:0      收藏:0      [点我收藏+]

标签:time   etc   ble   code   val   put   reg   har   tor   

打开$HADOOP_HOME/etc/hadoop/yarn-site.xml,增加以下配置(在此配置文件中尽量不要使用中文注释)

 1 <!--logs-->
 2 <property>
 3 <name>yarn.log-aggregation-enable</name>
 4 <value>true</value>
 5 </property>
 6 <!-- logs keep time -->
 7 <property>
 8 <name>yarn.log-aggregation.retain-seconds</name>
 9 <value>604800</value>
10 </property>

依次执行以下命令start-dfs.sh,start-yarn.sh.mr-jobhistory-daemon.sh start historyserver启动完毕后jps

技术分享图片

接下来执行MapReduce程序

hadoop fs -rm -r -f /usr/tele/hadoop/wcoutput
hadoop jar /opt/module/hadoop-3.1.1/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.1.jar wordcount /usr/tele/hadoop/wcinput /usr/tele/hadoop/wcoutput

执行完毕后打开mapreduce管理界面(8088),再打开history(19888),然后打开logs

技术分享图片

技术分享图片

技术分享图片

history打不开的请参考https://www.cnblogs.com/tele-share/p/9498698.html

hadoop 3.x 配置日志功能

标签:time   etc   ble   code   val   put   reg   har   tor   

原文地址:https://www.cnblogs.com/tele-share/p/9498774.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!