对于LINUX SA来说,服务器性能是需要我们特别关注的,包括CPU、IO、内存等等系统的优化变得至关重要,这里转载一篇非常不错的关于IO优化的文章,供大家参考和学习:一、关于页面缓存的信息,可以用cat /proc/meminfo看到。其中的Cached 指用于pagecache的内存大小(dis...
分类:
系统相关 时间:
2014-09-12 20:39:04
阅读次数:
377
AppMaster向RM请求资源MRAppMaster :serviceinit // service to allocate containers from RM (if non-uber) or to fake it (uber) containerAllocator = creat...
分类:
其他好文 时间:
2014-09-11 15:12:42
阅读次数:
867
缓存(cached)是把读取过的数据保存起来,重新读取时若命中(找到需要的数据)就不要去读硬盘了,若没有命中就读硬盘。其中的数据会根据读取频率进行组织,把最频繁读取的内容放在最容易找到的位置,把不再读的内容不断往后排,直至从中删除。缓冲(buffers)是根据磁盘的读写设计的,把分散的写操作集中进行...
分类:
其他好文 时间:
2014-09-10 19:29:21
阅读次数:
274
1.Linux的版本:核心(kernel)版本和发行(distribution)版本2.复制、删除和移动文件的命令cp [选项] 源文件或目录 目标文件或目录 -R,-r递归复制目录,即将源目录下的所有文件及各级子目录都复制到目标位置。 rm[选项] 文件列表 删除文件和目录mv [选项] sour...
分类:
数据库 时间:
2014-09-10 17:20:10
阅读次数:
341
安装好git客户端和搭好服务器之后,第一步要做的是 git clone 远程主机 添加本地项目时,在git目录下 git add . //表示把当前文件添加到版本库中 git rm -rf 版本库名 //可以删除本地仓库 查看git记录用 git log git...
分类:
其他好文 时间:
2014-09-10 15:40:30
阅读次数:
177
关于CACHE BUFFERS CHAINS描述
CACHE BUFFERS CHAINS latch is acquired when searching
for data blocks cached
in the buffer cache.
Since the Buffer cache is implemented as a
sum of chains...
分类:
其他好文 时间:
2014-09-10 14:13:40
阅读次数:
345
选项名称使用格式含义-ls-ls 查看指定路径的当前目录结构-lsr-lsr 递归查看指定路径的目录结构-du-du 统计目录下个文件大小-dus-dus 汇总统计目录下文件(夹)大小-count-count [-q] 统计文件(夹)数量-mv-mv 移动-cp-cp 复制-rm-rm [-sk.....
分类:
其他好文 时间:
2014-09-10 12:07:20
阅读次数:
133
首先名词解释。ORM:对象关系映射(英语:Object Relational Mapping,简称ORM,或O/RM,或O/R mapping),是一种程序技术,用于实现面向对象编程语言里不同类型系统的数据之间的转换。从效果上说,它其实是创建了一个可在编程语言里使用的“虚拟对象数据库”。面向对象是从...
Client 端:
//最终通过ApplicationClientProtocol协议提交到RM端的ClientRMService内
package org.apache.hadoop.mapred;
jobclient包内
YarnRunner
public JobStatus submitJob(JobID jobId, String jobSubmitDir, Credentials...
分类:
其他好文 时间:
2014-09-09 12:48:58
阅读次数:
245
NM端
//NM发送心跳,增加一个NODE_UPDATE事件,简单返回一个respone,异步驱动型,事件再驱动assignContainers,从资源请求结构里取出需求分配资源
//AsyncDispatcher原理
//一个event队列,一个eventtype.class 到处理器对应关系(仅仅是一个class对应一个处理器,class是个Enum可能会有很多种值,具体逻辑在处理器内部)...
分类:
其他好文 时间:
2014-09-09 12:31:58
阅读次数:
307