HMaster的RPC接口，分两类：HMaster与RegionServer通讯接口，总共只有两个-->regionServerStartup:当regionserver启动时会调用该接口 -->将发请起求的RS的信息写入serverInfo，注意这里的hostname为master所识别的hos....
分类：
其他好文 时间：
2015-05-29 20:09:16
阅读次数：
107
HMaster的RPC接口，分两类：HMaster与RegionServer通讯接口，总共只有两个-->regionServerStartup:当regionserver启动时会调用该接口-->将发请起求的RS的信息写入serverInfo，注意这里的hostname为master所识别的hostname，而非RS告诉master的-->调用serverManager的r..
分类：
其他好文 时间：
2015-05-29 18:25:03
阅读次数：
122
HMaster的RPC接口，分两类：
HMaster与RegionServer通讯接口，总共只有两个
-->regionServerStartup: 当regionserver启动时会调用该接口
-->将发请起求的RS的信息写入serverInfo，注意这里的hostname为master所识别的hostname，而非RS告诉master的
-->调用serverMan...
分类：
其他好文 时间：
2015-05-29 18:15:12
阅读次数：
140
当RM(ResourcesManager)和NM(NodeManager)陆续将所有模块服务启动，最后启动是NodeStatusUpdater，NodeStatusUpdater将用Hadoop RPC远程调用ResourcesTrackerService中的函数，进行资源是初始化等操作，为将要运行...
分类：
其他好文 时间：
2015-05-28 15:45:04
阅读次数：
144
当RM(ResourcesManager)和NM(NodeManager)陆续将所有模块服务启动，最后启动是NodeStatusUpdater，NodeStatusUpdater将用Hadoop RPC远程调用ResourcesTrackerService中的函数，进行资源是初始化等操作，为将要运行...
分类：
其他好文 时间：
2015-05-28 14:27:38
阅读次数：
115
当RM(ResourcesManager)和NM(NodeManager)陆续将所有模块服务启动，最后启动是NodeStatusUpdater，NodeStatusUpdater将用Hadoop
RPC远程调用ResourcesTrackerService中的函数，进行资源是初始化等操作，为将要运行的Job做好准备。以下主要分析在Job提交之前 RM与NM在心跳的驱动下操作。
AD：
ha...
分类：
其他好文 时间：
2015-05-28 14:15:46
阅读次数：
169
client调用FileSystem.open(),该FileSystem指向的实例是DistrbutedFileSystem（DFS），它通过RPC请求到Namenode.
Namenode收到请求后，对于每一个块返回存有该副本的Datanode地址。并且依照“网络拓扑”来排序。（就近原则）DFS获取到BlockLocations后，可以根据当前读取偏移量计算指定DataNode并进行通讯，返...
分类：
其他好文 时间：
2015-05-28 09:40:55
阅读次数：
236
文件夹的创建是一个相对简单的过程，主要是通过FileSystem中的mkdirs（）方法，这个方法在DFSClient实例中调用同名方法mkdirs（），通过Hadoop本身的RPC机制调用Namenode的mkdirs（）方法，最终这个调用PUSH到FSNameSystem的mkdirsInter...
分类：
其他好文 时间：
2015-05-26 20:32:10
阅读次数：
130
文件夹的创建是一个相对简单的过程，主要是通过FileSystem中的mkdirs（）方法，这个方法在DFSClient实例中调用同名方法mkdirs（），通过Hadoop本身的RPC机制调用Namenode的mkdirs（）方法，最终这个调用PUSH到FSN...
分类：
其他好文 时间：
2015-05-26 19:18:41
阅读次数：
218
文件夹的创建是一个相对简单的过程，主要是通过FileSystem中的mkdirs（）方法，这个方法在DFSClient实例中调用同名方法mkdirs（），通过Hadoop本身的RPC机制调用Namenode的mkdirs（）方法，最终这个调用PUSH到FSNameSystem的mkdirsInternal方法，这个方法主要就是检验访问权限..
分类：
其他好文 时间：
2015-05-26 19:09:18
阅读次数：
185
