1. mapper任务一般执行 输入格式解析、投影（选择相关的字段）、过滤（过滤掉无关记录）。reducer任务一般2. 对于map任务和ruduce任务，tasktracker有固定数量的任务槽。3. 分片（split）的大小一般就是文件块大小。map任务的数量取决于文件大小和块大小，不用刻意去设...
分类：
其他好文 时间：
2014-07-22 22:54:16
阅读次数：
314
测试hadoop版本：2.4 Map端聚合的应用场景：当我们只关心所有数据中的部分数据时，并且数据可以放入内存中。使用的好处：可以大大减小网络数据的传输量，提高效率；一般编程思路：在Mapper的map函数中读入所有数据，然后添加到一个List（队列）中，然后在cleanup函数中对list进行处理，输出我们关系的少量数据。实例：在map函数中使用空格分隔每行数据，然后把每个单词添加到一个堆栈中，...
分类：
其他好文 时间：
2014-07-18 23:00:49
阅读次数：
283
135端口:Microsoft在这个端口运行DCE RPC end-point mapper为它的DCOM服务。这与UNIX 111端口的功能很相似。使用DCOM和RPC的服务利用计算机上的end-point mapper注册它们的位置。远端客户连接到计算机时，它们查找end-point mappe...
分类：
其他好文 时间：
2014-07-18 20:05:06
阅读次数：
938
问题一：Unable to connect to your virtual device解决方法：基本都是内存不够导致的，在virtualbox中调整对应虚拟机的内存，确保任务管理器中的性能一项中剩余内存大于虚拟机分配的内存即可。BTW：任务管理器是不统计虚拟机的内存的。。问题二：从Genymoti...
分类：
其他好文 时间：
2014-07-18 19:21:48
阅读次数：
251
Methods support a sleep mode for an embedded device. Embedded devices like sensors and actuators used in wireless sensor networks have a limited power...
分类：
Web程序 时间：
2014-07-18 08:33:13
阅读次数：
479
Hadoop代码测试环境：Hadoop2.4原理：在Hadoop的MapReduce过程中，Mapper读取处理完成数据后，会把数据发送到Partitioner，由Partitioner来决定每条记录应该送往哪个reducer节点，默认使用的是HashPartitioner，其核心代码如下：/** Use {@link Object#hashCode()} to partition. */
p...
分类：
其他好文 时间：
2014-07-17 15:06:56
阅读次数：
315
xilinx ise下载出现以下问题PROGRESS_START - Starting Operation.INFO:iMPACT:583 - '1': The idcode read from the device does not match the idcode in the bsdl Fil...
分类：
其他好文 时间：
2014-07-17 13:01:31
阅读次数：
955
1.首先/etc/sysconfig/network-scripts下增加ifcfg-bond0DEVICE=bond0BOOTPROTO=noneONBOOT=yesTYPE=EthernetIPADDR=192.168.0.10NETMASK=255.255.255.0NETWORK=192.168.0.12、ifcfg-eth0/eth1的配置其它类似:DEVICE=eth0BOOTPROTO=noneONBOOT=yesMASTER=bond0SLAVE=yes3、修改..
分类：
系统相关 时间：
2014-07-17 09:20:49
阅读次数：
316
VMware里克隆出来的CentOSLinux。。ifconfig...没有看到eth0.。然后重启网卡又报下面错误。故障现象：service network restartShutting down loopback insterface: ...
分类：
系统相关 时间：
2014-07-16 18:24:24
阅读次数：
230
iphone手机连接USB时出现需要Mobile device setup disk上的usbaapl.sys文件...
分类：
移动开发 时间：
2014-07-16 13:52:54
阅读次数：
299
