1 Map side tuning参数1.1 MapTask运行内部原理 当map
task开始运算,并产生中间数据时,其产生的中间结果并非直接就简单的写入磁盘。这中间的过程比较复杂,并且利用到了内存buffer来进行已经产生的部分结果的缓存,并在内存buffer中进行一些预排序来优化整个map.....
分类:
其他好文 时间:
2014-05-20 01:54:58
阅读次数:
341
转自:http://www.oschina.net/question/129540_30919I/O 调优下面就磁盘 I/O 和网络 I/O
的一些常用的优化技巧进行总结如下:磁盘 I/O 优化性能检测我们的应用程序通常都需要访问磁盘读取数据,而磁盘 I/O 通常都很耗时,我们要判断 I/O
是否是...
分类:
编程语言 时间:
2014-05-20 01:38:42
阅读次数:
492
转自:http://storage.chinabyte.com/14/11568014.shtml很多人刚刚接触数据库时都有疑问:在很多程序中都会是有的直接读取一个静态文件,有的是读取数据库。直接读取静态文件,不访问数据库速度是会很快,但是为什么还要访问数据库呢?它们两则肯定是有区别的,那么区别是什...
分类:
数据库 时间:
2014-05-20 01:16:41
阅读次数:
320
vmstat 命令是常见的Linux性能监控工具,报告关于内核线程、虚拟内存、磁盘、陷阱和 CPU
活动的统计信息。由 vmstat
命令生成的报告可以用于平衡系统负载活动。系统范围内的这些统计信息(所有的处理器中)都计算出以百分比表示的平均值,或者计算其总和。vmstat使用一般vmstat工具的...
分类:
系统相关 时间:
2014-05-19 23:36:07
阅读次数:
602
实例(instance)实例是一个非固定的,基于内存的基本进程与内存结构.当服务器关闭时,实例就不存在了.数据库(DataBase)数据库指固定的,基于磁盘的数据文件,控制文件,日志文件,参数文件,归档日志文件.一般情况下一个数据库包含一个实例.数据库服务器(database
server)数据库服...
分类:
数据库 时间:
2014-05-19 22:35:37
阅读次数:
310
HBA,即主机总线适配器英文“Host Bus
Adapter”缩写。是一个在服务器和存储装置间提供输入/输出(I/O)处理和物理连接的电路板和/或集成电路适配器。HBA减轻了主处理器在数据存储和检索任务的负担,它能够提高服务器的性能。一个HBA和与之相连的磁盘子系统有时一起被称作一个磁盘通道。网卡...
分类:
其他好文 时间:
2014-05-19 20:24:21
阅读次数:
405
1、将根文件系统制作 成ramdisk#genext2fs -b 8192 -d
/home/fs/myrootfs/ ramdisk说明:这一步出现问题,后来发现是这个分配的空间太小,于是将8192改为120400#genext2fs -b
/home/xiongyao/rootfs/ ramdi...
分类:
其他好文 时间:
2014-05-19 20:12:21
阅读次数:
312
在《编程珠玑》中提到一个用位向量解决排序的问题,其具体的要求如下:输入:一个包含最多n个整数的文件,每个整数都小于n,且无重复输出:按升序排列的输入整数的列表约束:最多有(大约)1MB的内存空间可用,有充足的磁盘存储空间可用。运行时间最多几分钟,运行时间为10秒就不需要进一步优化了。基本的思路是这样...
分类:
其他好文 时间:
2014-05-19 09:55:39
阅读次数:
390
一、为当前实体模型启用数据迁移
基础搭建好了,也就是原有的数据库有了,原有数据库的实体对象也有了,但生成的上下文中并没有标记当前数据库是否已经存在,当前实体是否修改过(以前版本好像有标记的),所以,要首先启用迁移。
启用迁移后会自动生成新的文件夹和类,了解即可 系统自动添加的文件 系统在数据库中新生...
分类:
数据库 时间:
2014-05-19 07:03:09
阅读次数:
453
是从2012.7开始自学Java编程的到现在快两年了。我没有做过真正意义上的项目,有的只是磁盘上按照教程码的代码。我觉得Java学得不好,高级编程那本书没有看过几页。初级编程都没有完全看完和学会,以至于到后边学习SSH框架十分吃力,学习Android也不轻松,这和Java底子不牢固是有很大关系的。当...
分类:
编程语言 时间:
2014-05-17 14:47:49
阅读次数:
307