读取特别大的xlsx文件时, 需要使用StreamingReader, 可以控制JVM内存峰值在200M以内 https://github.com/monitorjbl/excel-streaming-reader 相比较官方的方案 官方的方案内存占用明显较高.
分类：
编程语言 时间：
2016-03-21 16:34:39
阅读次数：
486
发现了几个视频参数对比的资源，是Wikipedia上的，总结的非常好： 流媒体系统对比： http://en.wikipedia.org/wiki/Comparison_of_streaming_media_systems 封装格式对比： http://en.wikipedia.org/wiki/C
分类：
其他好文 时间：
2016-03-15 18:38:35
阅读次数：
142
下面是 StuQ 发布的大数据技能图谱，比较实用，供参考 大数据处理框架 Spark - RDD - Spark SQL - Spark Streaming - MLLibHadoop - HDFS (分布式文件系统) - Mapreduce（计算框架） - Yarn（资源管理平台） - Pig
分类：
其他好文 时间：
2016-03-14 09:28:47
阅读次数：
173
该博文对SparkStreaming中的两个关键函数mapWithState和reduceByKeyAndWindow进行了总结，希望能够帮到大家很好的理解他们，毕竟作者刚开始对这两个函数产生了一些误解。
分类：
其他好文 时间：
2016-03-13 23:55:05
阅读次数：
1186
http://www.cnblogs.com/haibindev/archive/2013/01/30/2880764.html HTTP Live Streaming直播(iOS直播)技术分析与实现 不经意间发现，大半年没写博客了，自觉汗颜。实则2012后半年，家中的事一样接着一样发生，实在是没有
分类：
移动开发 时间：
2016-03-08 21:12:51
阅读次数：
236
一、Spark框架预览 主要有Core、GraphX、MLlib、Spark Streaming、Spark SQL等几部分。 GraphX是进行图计算与图挖掘，其中主流的图计算框架现在有：Pregal、HAMA、Giraph（这几部分采用超步即同步的方式），而GraphLab与Spark Grap
分类：
其他好文 时间：
2016-03-04 09:17:57
阅读次数：
391
http://www.cnblogs.com/haibindev/archive/2013/01/30/2880764.html 不经意间发现，大半年没写博客了，自觉汗颜。实则2012后半年，家中的事一样接着一样发生，实在是没有时间。快过年了，总算忙里偷闲，把最近的一些技术成果，总结成了文章，与大家
分类：
移动开发 时间：
2016-03-04 00:32:47
阅读次数：
241
http://blog.csdn.net/cjsafty/article/details/7922849 简介：HTTP Live Streaming（缩写是 HLS）是一个由苹果公司提出的基于HTTP的流媒体 网络传输协议。 是苹果公司QuickTime X和iPhone软件系统的一部分。它的工作
分类：
其他好文 时间：
2016-03-04 00:25:24
阅读次数：
299
在POI3.8中SXSSF仅仅支持excel2007格式是对XSSF的一种流的扩展。目的在生成excel时候，需要生成大量的数据的时候，通过刷新的方式将excel内存信息刷新到硬盘的方式，提供写入数据的效率。 官方原文如下： SXSSF (Streaming Usermodel API) Note
// scalastyle:off println package org.apache.spark.examples.streaming import kafka.serializer.StringDecoder import org.apache.spark.SparkConf import o...
分类：
其他好文 时间：
2016-03-02 20:09:26
阅读次数：
181
