1 Map side tuning参数1.1 MapTask运行内部原理 当map
task开始运算,并产生中间数据时,其产生的中间结果并非直接就简单的写入磁盘。这中间的过程比较复杂,并且利用到了内存buffer来进行已经产生的部分结果的缓存,并在内存buffer中进行一些预排序来优化整个map.....
分类:
其他好文 时间:
2014-05-20 01:54:58
阅读次数:
341
spring框架jar包1、下载spring源包spring地址:http://www.springsource.org/download我下的是spring-framework-3.1.0.RELEASE-with-docs.zip下载依赖包:spring-framework-3.0.5.RELE...
分类:
编程语言 时间:
2014-05-19 20:20:20
阅读次数:
394
遇到的问题:当点击上面的logs时,会出现下面问题:这个解决方案为:By default,
Hadoop stores the logs of each container in the node where that container was
hosted. While this is irre...
分类:
其他好文 时间:
2014-05-19 10:33:13
阅读次数:
369
开发环境Window 7Unity3D 3.3.0MB525 defy Android
2.1-update1本次学习:1.认识Unity2.Unity3D环境搭建与Android软件生成3.Unity3D基本使用方法1.认识Unity3DUnity3D是一个让开发者能够在多平台制作同一款游戏的游戏...
分类:
移动开发 时间:
2014-05-19 09:04:28
阅读次数:
413
UCloud云服务以大家所称道的高性能和高稳定性,走进了越来越多的大众视野。大家都对UCloud云计算平台的技术实现方式非常好奇。UCloud云主机的高性能是如何实现的?如何使得SATA跑过SSD?持久化分布式内存存储机制是怎样的?如何实现云计算模式下的Hadoop多租户隔离?分布式虚拟交换机又.....
分类:
其他好文 时间:
2014-05-19 08:28:47
阅读次数:
338
搭建安卓开发环境1.下载android开发必备工具之JAVA
JDK::http://www.java.net/download/jdk6/6u10/promoted/b32/binaries/jdk-6u10-rc2-bin-b32-windows-i586-p-12_sep_2008.exe下载...
分类:
移动开发 时间:
2014-05-18 19:29:39
阅读次数:
453
Hive安装配置详解本文主要是在Hadoop单机模式中演示Hive默认(嵌入式Derby模式)安装配置过程。1、下载安装包到官方网站下载最新的安装包,这里以Hive-0.12.0为例:$tar-zxfhive-0.12.0-bin.tar.gz-C/home/ubuntu/hive-0.12.0在这里,HIVE_HOME=”/home/ubuntu/hive-0.12.0”。..
分类:
其他好文 时间:
2014-05-16 02:36:44
阅读次数:
369
简单的记录下笔记,具体可百度!Android SDK (Software
Development Kit)- Android 软件开发工具包,用于辅助Android 操作系统软件开发,是开发Android
软件、文档、范例、工具的一个集合。Android NDK (Native Developmen...
分类:
移动开发 时间:
2014-05-16 01:18:33
阅读次数:
418
HADOOP HA配置
hadoop2.x的ha配置,此文档中描述有hdfs与yarn的ha配置。
此文档的假定条件是zk已经安装并配置完成,其实也没什么安装的。
hdfs ha配置
首先,先配置core-site.xml配置文件:
在老版本中使用mr1时,还可能使用fs.default.name来进行配置
fs.defaultFS
此处配置的mycluster目前还没...
分类:
其他好文 时间:
2014-05-15 23:40:10
阅读次数:
705