MapReduce中的Shuffle在MapReduce框架中，shuffle是连接Map和Reduce之间的桥梁，Map的输出要用到Reduce中必须经过shuffle这个环节，shuffle的性能高低直接影响了整个程序的性能和吞吐量。
Shuffle是MapReduce框架中的一个特定的phase，介于Map phase和Reduce phase之间，当Map的输出结果要被Reduce使用时，...
分类：
其他好文 时间：
2015-07-14 20:30:00
阅读次数：
135
偶然用到fastjson转换json 在前台用js解析居然某些字段没有，以前用过gson。联想到是不是类似gson默认将null值不显示了，找了下资料果真如此直接上代码吧import java.util.HashMap;
import java.util.Map;import com.alibaba.fastjson.JSONObject;
import com.alibaba.fastjson.s...
分类：
Web程序 时间：
2015-07-14 18:13:30
阅读次数：
127
HashMap和LinkedHashMap，TreeMap的区别
1.具体区别如下：
我们在开发的过程中使用HashMap比较多，在Map中在Map 中插入、删除和定位元素，HashMap 是最好的选择。
但如果您要按自然顺序或自定义顺序遍历键，那么TreeMap会更好。
如果需要输出的顺序和输入的相同,那么用LinkedHashMap 可以实现,它还可以按读取顺序来排列....
分类：
其他好文 时间：
2015-07-14 17:58:48
阅读次数：
243
前置阅读：jdk源码阅读-Map ：http://www.cnblogs.com/ccode/p/4645683.html在前置阅读的文章里，已经提到HashMap是基于Hash表实现的，所以在讲解HashMap之前 ，有必要提前了解下Hash的原理。参考《算法导论》《算法》
分类：
其他好文 时间：
2015-07-14 17:27:18
阅读次数：
91
一、 控制hive任务中的map数:1. 通常情况下，作业会通过input的目录产生一个或者多个map任务。主要的决定因素有： input的文件总个数，input的文件大小，集群设置的文件块大小(目前为128M, 可在hive中通过set dfs.block.size;命令查看到，该参数不能自定义修...
分类：
其他好文 时间：
2015-07-14 17:26:21
阅读次数：
992
//定义地图 #region 定义地图 int x=6; int y=1; //人的初始坐标 int a=6; int b=3; //箱子的初始坐标 int[,] map = new int[10, 10] {...
分类：
编程语言 时间：
2015-07-14 17:20:55
阅读次数：
109
在我们正式分析Map的源代码前，我们首先阅读下这篇关于Map的简介http://www.jb51.net/article/32652.htm简单来说，Map分为两种一种是有序的，一种是无序的。我们用的较多的为无序的，即：Hashmap。其实现的原理为哈希值(hashcode)。而关于有序的实现，为T...
分类：
其他好文 时间：
2015-07-14 17:11:39
阅读次数：
103
题意：给n个插座，m个设备（肯定要插电了），k种转换头可无限次使用（注意是单向的），问有多少设备最终是不能够插上插座的？分析： 看起来就是设备匹配插座，所以答案不超过m。这个题适合用网络流来解，可能就是为网流落而生。 假设每种头对应着一个编号（可以用map实现转换string到int），主要在k.....
分类：
其他好文 时间：
2015-07-14 15:30:27
阅读次数：
122
研究者一方面进一步构造效率更高的同态加密方案，另一方面也转向了演化而来的新密码学工具：多线性对(multilinear map)的构造和应用中。这个是公钥密码学现在最热的研究方向。 有些人会说为何没有提签名(signature)呢？现在签名方案已经被融合到了函数加密中。实际上，已经有基于函数加密的签名方案的一般性构造。即满足条件的函数加密都可以转化成等价的签名方案。...
分类：
其他好文 时间：
2015-07-14 13:42:41
阅读次数：
226
