码迷,mamicode.com
首页 >  
搜索关键字:程序提交hadoop任务    ( 1个结果
如何通过Java程序提交yarn的mapreduce计算任务
由于项目需求,需要通过Java程序提交Yarn的MapReduce的计算任务。与一般的通过Jar包提交MapReduce任务不同,通过程序提交MapReduce任务需要有点小变动,详见以下代码。     以下为MapReduce主程序,有几点需要提一下:     1、在程序中,我将文件读入格式设定为WholeFileInputFormat,即不对文件进行切分。     2、为了控制reduc...
分类:编程语言   时间:2014-11-06 23:40:42    阅读次数:500
1条  
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!