在JavaSE5中，JUC(java.util.concurrent)包出现了在java.util.concurrent包及其子包中，有了很多好玩的新东西：1、执行器的概念和线程池的实现。Executor、ExecutorService框架 从Executor接口开始，到ExecutorServi....
分类：
编程语言 时间：
2014-07-06 18:38:33
阅读次数：
224
user www www;worker_processes 2;error_log /usr/local/nginx/logs/nginx_error.log crit;pid /usr/local/nginx/logs/nginx.pid;#Specifies the valu...
分类：
其他好文 时间：
2014-07-05 20:48:19
阅读次数：
245
创建zybo cluster的spark集群（计算层面）： 1.每个节点都是同样的filesystem，mac地址冲突，故： vi ./etc/profile export PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/b...
分类：
其他好文 时间：
2014-07-05 17:29:31
阅读次数：
549
原创文章，转载请注明： 转载自www.cnblogs.com/tovin/p/3822985.html一、软件下载 maven下载安装 ：http://10.100.209.243/share/soft/apache-maven-3.2.1-bin.zip jdk下载安装： http://...
GraphX是Spark中用于图和图并行计算的API,可以认为是GraphLab(C++)和Pregel(C++)在Spark(Scala)上的重写及优化，跟其他分布式图计算框架相比，GraphX最大的贡献是，在Spark之上提供一栈式数据解决方案，可以方便且高效地完成图计算的一整套流水作业。
分类：
其他好文 时间：
2014-07-05 16:50:56
阅读次数：
210
微软官方有一套专门用于SharePoint 2010, Exchange 2010 Demo的虚拟机：SharePoint 2010: Information Worker Demonstration and Evaluation Virtual Machine。很多官方的教程和示列都是基于这个De...
分类：
其他好文 时间：
2014-07-03 19:54:47
阅读次数：
314
工作队列工作队列（又称：任务队列Task Queues）是为了避免等待一些占用大量资源、时间的操作，当我们把任务Task当做消息发送队列中，一个运行在后台的工作者worker进程就会取出任务然后处理。当有多个works，任务在它们之间共享创建任务创建任务的new_task.py#!/usr/bin/...
分类：
其他好文 时间：
2014-07-03 19:05:35
阅读次数：
241
早在Spark Submit 2013里就有介绍到Spark SQL，不过更多的是介绍Catalyst查询优化框架。经过一年的开发，在今年Spark Submit 2014上，Databricks宣布放弃Shark 的开发，而转投Spark SQL，理由是Shark继承了Hive太多，优化出现了瓶颈，如图：
今天把Spark最新的代码签了下来，测试了一下：
1、编译Spar...
分类：
数据库 时间：
2014-07-03 16:06:04
阅读次数：
534
这一章想讲一下Spark的缓存是如何实现的。这个persist方法是在RDD里面的，所以我们直接打开RDD这个类。 def persist(newLevel: StorageLevel): this.type = { // StorageLevel不能随意更改 if (storageL...
分类：
其他好文 时间：
2014-07-03 12:53:15
阅读次数：
314
