1 Map side tuning参数1.1 MapTask运行内部原理 当map
task开始运算，并产生中间数据时，其产生的中间结果并非直接就简单的写入磁盘。这中间的过程比较复杂，并且利用到了内存buffer来进行已经产生的部分结果的缓存，并在内存buffer中进行一些预排序来优化整个map.....
分类：
其他好文 时间：
2014-05-20 01:54:58
阅读次数：
341
转：我们已经看到，当想让写入者线程和读取者线程以独占的方式或共享的方式访问一个资源的时候，可以使用SRWLock。在这些情况下，如果读取者线程
没有数据可以读取，那么它应该将锁释放并等待，直到写入者线程产生了新的数据为止。如果用来接收写入者线程产生的数据结构已满，那么写入者同样应该释放
SRWLoc...
ARM指令集可以分为6类，即是跳转指令，数据处理指令，程序状态传输指令，Load、Store指令，协处理器指令和异常中断指令跳转指令：在ARM中有两种方式可以实现程序的跳转，一种是跳转指令，另一种是直接向PC寄存器写入目标地址的值通过直接向PC寄存器写入目标寄存器的数字可以实现在4GB
地址空间的任...
分类：
其他好文 时间：
2014-05-16 03:26:38
阅读次数：
286
1. 关闭PCIe 控制器：
通过向系统控制寄存器PERIPHCTRL30[pcie0_app_ltssm_enabl]写入0 关闭PCIe0 控制
器。
通过向系统控制寄存器PERIPHCTRL77[pcie1_app_ltssm_enabl]写入0 关闭PCIe1 控制
器。
2. 使能PCIe 控制器相关的时钟：
设置CRG 寄存器PERI_CRG30[pcie0_cken]使能...
分类：
其他好文 时间：
2014-05-15 23:10:22
阅读次数：
382
如下是Pipe的一个简单的例子。管道的通信是单项的。只能一端写，一端读。管道通信只能在有共同祖先的两个进程之间。在两个进程中，进行数据传送。pipe(fd)创建管道，fd【0】作为read端，fd【1】作为写入端。当fd[1]不存在的时候，认为已经读到结尾，read返回0.如果fd[1]存在，写入数据后，将写入端关闭，但是数据一直存在，直到读出。数据总是写在管道的尾部，而读的时候，则是从头部开始读...
分类：
其他好文 时间：
2014-05-15 20:06:03
阅读次数：
264
1、文件写入
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
import
time
import
random
#打开模式列表：
#w 以写方式打开，
#a 以追加模式打开 (从 EOF 开始, 必要时创建新...
分类：
编程语言 时间：
2014-05-15 19:28:45
阅读次数：
507
#1.建议在opt下面操作，我的opt是一个单独分区，创建一个swap的文件夹
cd/opt
mkdirswap
#2.创建一个2GB大小的文件
ddif=/dev/zeroof=swapfilebs=1024count=2048000
#3.转换激活swap分区
mkswapswapfile
swaponswapfile
#4.查看扩充后的大小
free-m
#5.写入/etc/fstab文件，在..
分类：
其他好文 时间：
2014-05-15 18:46:17
阅读次数：
256
/// /// 信息写入记事本 /// /// /// public static void
Write(string text, string path) { try { DateTime newDat...
分类：
其他好文 时间：
2014-05-15 17:51:53
阅读次数：
262
由于现网有时候要测试很多端口的连通性，所以就写了个小脚本,实现批量测试将telnet成功的写入到telnet_alive.txt中，失败则写入telnet_die.txt中#!/bin/bash#thisscripttestUPtootherhost.#Iplist=/opt/script_test/iplist.dataPortnumber=7001foripin$(catiplist.data)do(slee..
分类：
Web程序 时间：
2014-05-15 08:46:11
阅读次数：
385
HLog概述hbase在写入数据之前会先写入MemStore，成功了再写入HLog，当MemStore的数据丢失的时候，还可以用HLog的数据来进行恢复，下面先看看HLog的图。旧版的HLog是实际上是一个SequceneFile，0.96的已经使用Protobuf来进行序列化了。从Writer和R...
分类：
其他好文 时间：
2014-05-15 07:38:50
阅读次数：
377
