在eclipse官网下载eclipse的linux版本(此处省略下载过程)，我下载的是eclipse-jee-indigo-SR2-linux-gtk.tar.gz，下面是安装过程:
1.sudo mv eclipse-jee-indigo-SR2-linux-gtk.tar.gz /opt/ 把文件移动到/opt/目录下(如果开始就放在/opt下面的就省略此步);
2.tar -zx...
分类：
系统相关 时间：
2014-05-10 10:03:39
阅读次数：
367
从Physical plan到Map-Reduce Plan
注：因为我们重点关注的是Pig On Spark针对RDD的执行计划，所以Pig物理执行计划之后的后端参考意义不大，这些部分主要分析流程，忽略实现细节。
入口类MRCompiler，MRCompilier按照拓扑顺序遍历物理执行计划中的节点，将其转换为MROperator，每个MROperator都代表一个map-reduce
j...
分类：
其他好文 时间：
2014-05-10 08:46:07
阅读次数：
366
1.工厂模式：及时由一个工厂类根据传入的参数决定生产那种产品类function
createPerson(name,age,job){ var o = new Object(); o.name = name; o.age = age;
o.job = job; o.sayName = functio...
分类：
编程语言 时间：
2014-05-10 02:11:47
阅读次数：
423
public class SyncMetadataJob:SPJobDefinition {
private const string JobName = @"Metadata Sync Job"; private int counter = 0;
...
分类：
其他好文 时间：
2014-05-08 22:30:30
阅读次数：
319
之前重启服务器上的服务，均是先使用ps -ef | grep
xxx指令查询出PID，然后再使用kill -9
PID指令杀死进程。由于重启的服务只止一个，每次都要重复输入，甚是麻烦。示例今天研究了一下，把以上手动查杀、重启服务的过程写成了shell脚本，重启服务只需执行脚本就可以了。附脚本样例：
...
分类：
其他好文 时间：
2014-05-07 20:18:02
阅读次数：
461
Video Surveillance
Time Limit: 1000MS
Memory Limit: 10000K
Total Submissions: 3145
Accepted: 1391
Description
A friend of yours has taken the job of security officer at...
分类：
其他好文 时间：
2014-05-07 06:49:43
阅读次数：
387
AD620 芯片93 dB min Common-Mode Rejection Ratio
(G = 10) 0.28 mV p-p Noise (0.1 Hz to 10 Hz) THEORY OF OPERATIONThe AD620 is a
monolithic instrumentatio...
分类：
其他好文 时间：
2014-05-06 14:30:28
阅读次数：
263
前段时间，一哥们，去杀Linux服务器的进程，发现kill命令失灵了，怎么杀都杀不死。
然后上网查了下资料，原来是要被杀的进程，成为了僵尸进程。 僵尸进程的查看方法： 利用命令ps，可以看到有标记为Z的进程就是僵尸进程。
知道了原因，就想怎么去把这个僵尸进程干掉。网上说了两种方法，一种最简单...
分类：
系统相关 时间：
2014-05-05 09:51:24
阅读次数：
515
MapReduce
job中,可以使用FileInputFormat和FileOutputFormat来对输入路径和输出路径来进行设置。在输出目录中，框架自己会自动对输出文件进行命名和组织，如:part-(m|r)-00000之类。但有时为了后续流程的方便，我们常需要对输出结果进行一定的分类和组织。...
分类：
其他好文 时间：
2014-05-04 10:22:15
阅读次数：
341
Spark中的Scheduler
scheduler分成两个类型，一个是TaskScheduler与其实现，一个是DAGScheduler。
TaskScheduler:主要负责各stage中传入的task的执行与调度。
DAGScheduler:主要负责对JOB中的各种依赖进行解析，根据RDD的依赖生成stage并通知TaskScheduler执行。
实例生成
TaskSchedule...
分类：
其他好文 时间：
2014-05-04 09:08:02
阅读次数：
379
