该博文对SparkStreaming中的两个关键函数mapWithState和reduceByKeyAndWindow进行了总结,希望能够帮到大家很好的理解他们,毕竟作者刚开始对这两个函数产生了一些误解。
分类:
其他好文 时间:
2016-03-13 23:55:05
阅读次数:
1186
http://www.cnblogs.com/haibindev/archive/2013/01/30/2880764.html HTTP Live Streaming直播(iOS直播)技术分析与实现 不经意间发现,大半年没写博客了,自觉汗颜。实则2012后半年,家中的事一样接着一样发生,实在是没有
分类:
移动开发 时间:
2016-03-08 21:12:51
阅读次数:
236
一、Spark框架预览 主要有Core、GraphX、MLlib、Spark Streaming、Spark SQL等几部分。 GraphX是进行图计算与图挖掘,其中主流的图计算框架现在有:Pregal、HAMA、Giraph(这几部分采用超步即同步的方式),而GraphLab与Spark Grap
分类:
其他好文 时间:
2016-03-04 09:17:57
阅读次数:
391
http://www.cnblogs.com/haibindev/archive/2013/01/30/2880764.html 不经意间发现,大半年没写博客了,自觉汗颜。实则2012后半年,家中的事一样接着一样发生,实在是没有时间。快过年了,总算忙里偷闲,把最近的一些技术成果,总结成了文章,与大家
分类:
移动开发 时间:
2016-03-04 00:32:47
阅读次数:
241
http://blog.csdn.net/cjsafty/article/details/7922849 简介:HTTP Live Streaming(缩写是 HLS)是一个由苹果公司提出的基于HTTP的流媒体 网络传输协议。 是苹果公司QuickTime X和iPhone软件系统的一部分。它的工作
分类:
其他好文 时间:
2016-03-04 00:25:24
阅读次数:
299
在POI3.8中SXSSF仅仅支持excel2007格式是对XSSF的一种流的扩展。目的在生成excel时候,需要生成大量的数据的时候,通过刷新的方式将excel内存信息刷新到硬盘的方式,提供写入数据的效率。 官方原文如下: SXSSF (Streaming Usermodel API) Note
// scalastyle:off println package org.apache.spark.examples.streaming import kafka.serializer.StringDecoder import org.apache.spark.SparkConf import o...
分类:
其他好文 时间:
2016-03-02 20:09:26
阅读次数:
181
转自:http://warlaze.blog.sohu.com/58477971.html AXIOM Axis对象模型(AXIOM)是一个XML对象模型,设计用于提高XML处理期间的内存的使用率和性能,基于Pull解析。 Pull解析方式,基于STAX(Streaming API for XML)
分类:
其他好文 时间:
2016-02-29 12:50:10
阅读次数:
271
Hadoop、Redis、Memcached、MongoDB、Spark、Storm、云计算、R语言、机器学习、Nginx、Linux、MySQL、Java EE、.NET、PHP Spark 大数据 视频教程 安装 SQL Streaming Scala Hive Hadoop
分类:
数据库 时间:
2016-02-28 18:34:07
阅读次数:
203
HLS ts m3u8文件HTTPHTTP+RTMAP HTTP Live Streaming(HLS) http://www.cnblogs.com/haibindev/archive/2013/01/30/2880764.html HTTP Live Streaming(HLS)是苹果公司(Ap
分类:
其他好文 时间:
2016-02-24 10:54:23
阅读次数:
205