yarn.resourcemanager.ha.enabled true yarn.resourcemanager.ha.rm-ids ...
分类:
其他好文 时间:
2014-07-14 19:48:02
阅读次数:
359
Hadoop YARN组件间的主要通信协议简介。...
分类:
其他好文 时间:
2014-07-14 14:04:13
阅读次数:
221
前言 MapReduce的源码分析是基于Hadoop1.2.1基础上进行的代码分析。 该章节会分析在MapTask端的详细处理流程以及MapOutputCollector是如何处理map之后的collect输出的数据。 map端的主要处理流程
图1 MapTask处理流程 图1所示为MapTask的主要代码执行流程,在MapTask启动后会进入入口run函数,根据是否使用...
分类:
其他好文 时间:
2014-07-14 13:31:33
阅读次数:
392
Hadoop YARN ApplicationMaster程序设计概述。...
分类:
其他好文 时间:
2014-07-14 11:27:32
阅读次数:
267
Hadoop MapReduce On YARN的实现 --- MRAppMaster内部组件剖析。...
分类:
移动开发 时间:
2014-07-14 11:26:56
阅读次数:
340
本来不打算写的了,但是真的是闲来无事,整天看美剧也没啥意思。这一章打算讲一下Spark on yarn的实现,1.0.0里面已经是一个stable的版本了,可是1.0.1也出来了,离1.0.0发布才一个月的时间,更新太快了,节奏跟不上啊,这里仍旧是讲1.0.0的代码,所以各位朋友也不要再问我讲的是哪...
分类:
其他好文 时间:
2014-07-13 21:43:15
阅读次数:
381
go:
控制批处理中的命令执行流程
命令格式:
go label
lable--行号
demo
bat
@echo off
echo 跳过中间,执行最后
goto last
type a.txt
:last
dir .
pause
a.txt
aaaaa
结果:...
从源代码的角度来看一下Spark SQL的核心执行流程吧...
分类:
数据库 时间:
2014-07-12 21:07:32
阅读次数:
299