spark内核揭秘-01-spark内核核心术语解析
spark内核揭秘-01-spark内核核心术语解析
spark内核揭秘-01-spark内核核心术语解析
spark内核揭秘-01-spark内核核心术语解析...
分类：
其他好文 时间：
2015-01-18 09:19:40
阅读次数：
175
http://www.cs.berkeley.edu/~matei/papers/2012/nsdi_spark.pdf ucb关于spark的论文，对spark中核心组件RDD最原始、本质的理解，没有比这个更好的资料了。必读。AbstractRDDs provide arestricted for...
分类：
其他好文 时间：
2015-01-18 07:03:31
阅读次数：
394
Android 5.0 提供了一个新的 JobScheduler API，它允许您通过为系统定义要在以后的某个时间或在指定的条件下（例如，当设备在充电时）异步运行的作业来优化电池寿命。首先看一下官方JobScheduler的API https://developer.android.com/reference/android/app/job/JobScheduler.htmlThis is an...
分类：
移动开发 时间：
2015-01-17 15:18:13
阅读次数：
711
目前没有实现，理一下思路，有3中途径：1：spark core可以使用sequoiadb最为数据源，那么是否spark sql可以直接操作sequoiadb。 (感觉希望不大,）2: spark sql支持Hive, sequoiadb可以和hive做对接，那么是否可以通过HIveContext ....
分类：
数据库 时间：
2015-01-17 15:10:37
阅读次数：
511
转载引用自：http://www.cnblogs.com/tovin/p/3833985.html最近在使用spark开发过程中发现当数据量很大时，如果cache数据将消耗很多的内存。为了减少内存的消耗，测试了一下Kryo serialization的使用代码包含三个类，KryoTest、MyReg...
分类：
编程语言 时间：
2015-01-17 12:34:27
阅读次数：
415
spark架构设计&编程模型01
spark架构设计&编程模型01
spark架构设计&编程模型01
spark架构设计&编程模型01...
分类：
其他好文 时间：
2015-01-16 19:13:50
阅读次数：
194
spark架构设计&编程模型 02
spark架构设计&编程模型 02
spark架构设计&编程模型 02
spark架构设计&编程模型 02...
分类：
其他好文 时间：
2015-01-16 19:09:11
阅读次数：
107
大家做高性能计算的朋友，想必对CPU的执行模式已经非常熟悉了吧。当代高级些的CPU一般采用超标量流水线，使得毗邻几条相互独立的指令能够并行执行——这称为指令集并行（ILP，Instruction-Level Parallelism）；而像x86引入的SSE（Streaming SIMD Extens...
分类：
其他好文 时间：
2015-01-16 18:55:43
阅读次数：
178
hadoop&spark mapreduce对比 & 框架设计和理解
hadoop&spark mapreduce对比 & 框架设计和理解
hadoop&spark mapreduce对比 & 框架设计和理解
hadoop&spark mapreduce对比 & 框架设计和理解...
分类：
其他好文 时间：
2015-01-16 16:51:26
阅读次数：
263
在前一篇文章中，介绍到了Galaxy的增量计算性质，其state是框架内部管理的，以及与Storm的简单对比。这篇文章将讲述更多Galaxy增量模型的事情，并介绍这套增量模型之上实现的Galaxy SQL和Galaxy Operator，同时会从增量角度对比Spark Streaming。...
分类：
其他好文 时间：
2015-01-16 16:42:07
阅读次数：
652
