码迷,mamicode.com
首页 >  
搜索关键字:JobHistory    ( 29个结果
hadoop2.X使用手册1:通过web端口查看主节点、slave1节点及集群运行状态
导读内容: 1.如何通过web查看hdfs集群状态 2.如何通过web查看运行在在主节点master上ResourceManager状态 3.如何通过web查看运行在在slave节点NodeManager资源状态 4.JobHistory 可以查看什么信息
分类:Web程序   时间:2015-07-01 15:39:47    阅读次数:167
hadoop 配置history server 和timeline server
一,配置history server 1.配置history server,在etc/hadoop/mapred-site.xml中配置以下内容. mapreduce.jobhistory.address localhost:10020 mapreduce.jobhistory.webapp.address localhost:198...
分类:其他好文   时间:2015-06-11 14:45:58    阅读次数:401
hadoop启动jobhistoryserver
hadoop启动jobhistoryserver来实现web查看作业的历史运行情况,由于在启动hdfs和Yarn进程之后,jobhistoryserver进程并没有启动,需要手动启动,启动的方法是通过:mr-jobhistory-daemon.sh start historyserver 命令还.....
分类:其他好文   时间:2015-05-13 19:27:27    阅读次数:127
Hadoop2伪分布模式安装
参照Apache的官方文档,Hadoop2还是蛮好搭建的,但是搭建好后,MapReduce的JobHistory页面却没法进去,这是因为JobHistory没有配置正确或者服务没有启动起来。本文将梳理伪分布模式的搭建过程,并给出配置文档,让你不再为搭建这些过程烦恼。准备 安装程序获取:从官网上下载,从Apache Download Mirrors选择一个镜像位置,然后选择一个Hadoop版本,下载h...
分类:其他好文   时间:2015-04-15 13:35:42    阅读次数:104
Hadoop2伪分布模式安装
参照Apache的官方文档,Hadoop2还是蛮好搭建的,但是搭建好后,MapReduce的JobHistory页面却没法进去,这是因为JobHistory没有配置正确或者服务没有启动起来。本文将梳理伪分布模式的搭建过程,并给出配置文档,让你不再为搭建这些过程烦恼。...
分类:其他好文   时间:2014-11-25 23:35:11    阅读次数:238
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第五步)(8)
也可以查看一下SparkWorker2上的运行情况:我们点击具体的Container查看其信息:程序运行结束后我们可以执行一下命令查看运行结果:也可通过HDFS控制台查看运行结果:可以通过Web控制的JobHistory查看历史工作记录:点击最近运行的WordCount作业进入历史作业详情:发现我们...
分类:其他好文   时间:2014-11-17 21:01:18    阅读次数:164
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第五步)(8)
也可以查看一下SparkWorker2上的运行情况: 我们点击具体的Container查看其信息: 程序运行结束后我们可以执行一下命令查看运行结果: 也可通过HDFS控制台查看运行结果: 可以通过Web控制的JobHistory查看历史工作...
分类:其他好文   时间:2014-11-14 14:24:39    阅读次数:148
【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群(第五步)(8)
也可以查看一下SparkWorker2上的运行情况:我们点击具体的Container查看其信息:程序运行结束后我们可以执行一下命令查看运行结果:也可通过HDFS控制台查看运行结果:可以通过Web控制的JobHistory查看历史工作记录:点击最近运行的WordCount作业进入历史作业详情:发现我们...
分类:其他好文   时间:2014-11-13 22:10:09    阅读次数:193
Hadoop JobHistory
hadoop jobhistory记录下已运行完的MapReduce作业信息并存放在指定的HDFS目录下,默认情况下是没有启动的,需要配置完后手工启动服务。mapred-site.xml添加如下配置 mapreduce.jobhistory.address hadoop000:10020 Ma...
分类:其他好文   时间:2014-10-11 20:26:06    阅读次数:251
29条   上一页 1 2 3
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!