码迷,mamicode.com
首页 >  
搜索关键字:spark sort-based shuffle内幕彻底解密    ( 7004个结果
spark内核揭秘-03-spark核心组件
spark内核揭秘-03-spark核心组件 spark内核揭秘-03-spark核心组件 spark内核揭秘-03-spark核心组件 spark内核揭秘-03-spark核心组件...
分类:其他好文   时间:2015-01-18 10:36:02    阅读次数:219
spark内核揭秘-01-spark内核核心术语解析
spark内核揭秘-01-spark内核核心术语解析 spark内核揭秘-01-spark内核核心术语解析 spark内核揭秘-01-spark内核核心术语解析 spark内核揭秘-01-spark内核核心术语解析...
分类:其他好文   时间:2015-01-18 09:19:40    阅读次数:175
spark 笔记 2: Resilient Distributed Datasets: A Fault-Tolerant Abstraction for In-Memory Cluster Computing
http://www.cs.berkeley.edu/~matei/papers/2012/nsdi_spark.pdf ucb关于spark的论文,对spark中核心组件RDD最原始、本质的理解,没有比这个更好的资料了。必读。AbstractRDDs provide arestricted for...
分类:其他好文   时间:2015-01-18 07:03:31    阅读次数:394
spark sql使用sequoiadb作为数据源
目前没有实现,理一下思路,有3中途径:1:spark core可以使用sequoiadb最为数据源,那么是否spark sql可以直接操作sequoiadb。 (感觉希望不大,)2: spark sql支持Hive, sequoiadb可以和hive做对接,那么是否可以通过HIveContext ....
分类:数据库   时间:2015-01-17 15:10:37    阅读次数:511
spark使用KryoRegistrator java代码示例
转载引用自:http://www.cnblogs.com/tovin/p/3833985.html最近在使用spark开发过程中发现当数据量很大时,如果cache数据将消耗很多的内存。为了减少内存的消耗,测试了一下Kryo serialization的使用代码包含三个类,KryoTest、MyReg...
分类:编程语言   时间:2015-01-17 12:34:27    阅读次数:415
spark架构设计&编程模型01
spark架构设计&编程模型01 spark架构设计&编程模型01 spark架构设计&编程模型01 spark架构设计&编程模型01...
分类:其他好文   时间:2015-01-16 19:13:50    阅读次数:194
spark架构设计&编程模型 02
spark架构设计&编程模型 02 spark架构设计&编程模型 02 spark架构设计&编程模型 02 spark架构设计&编程模型 02...
分类:其他好文   时间:2015-01-16 19:09:11    阅读次数:107
hadoop&spark mapreduce对比 & 框架设计和理解
hadoop&spark mapreduce对比 & 框架设计和理解 hadoop&spark mapreduce对比 & 框架设计和理解 hadoop&spark mapreduce对比 & 框架设计和理解 hadoop&spark mapreduce对比 & 框架设计和理解...
分类:其他好文   时间:2015-01-16 16:51:26    阅读次数:263
说说阿里增量计算框架Galaxy :增量计算模型 (二)
在前一篇文章中,介绍到了Galaxy的增量计算性质,其state是框架内部管理的,以及与Storm的简单对比。这篇文章将讲述更多Galaxy增量模型的事情,并介绍这套增量模型之上实现的Galaxy SQL和Galaxy Operator,同时会从增量角度对比Spark Streaming。...
分类:其他好文   时间:2015-01-16 16:42:07    阅读次数:652
Flex【原创】首尾相连的循环文本滚动简单实现
思路比较简单,准备一个主文本的副本用于辅助滚动,当主文本滚动出界时辅助文本开始滚动。不废话,上代码。 1 2 7 8 9 @namespace s "library://ns.adobe.com/flex/spark"; 10 @na...
分类:其他好文   时间:2015-01-16 14:32:05    阅读次数:237
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!