AFSoundManageriOS audio playing (both local and streaming) and recording made easy through a complete and block-driven Objective-C class. AFSoundManag...
分类：
其他好文 时间：
2015-02-06 23:08:40
阅读次数：
294
BlockGenerator和RateLimiter其实很简单，但是它包含了几个很重要的属性配置的处理，所以记录一下。/** * Generates batches of objects received by a * [[org.apache.spark.streaming.receiver.Re...
分类：
其他好文 时间：
2015-02-05 20:03:14
阅读次数：
148
InputDStream的继承关系。他们都是使用InputDStream这个抽象类的接口进行操作的。特别注意ReceiverInputDStream这个类，大部分时候我们使用的是它作为扩展的基类，因为它才能（更容易）使接收数据的工作分散到各个worker上执行，更符合分布式计算的理念。所有的输入流都...
分类：
其他好文 时间：
2015-02-05 17:56:10
阅读次数：
205
对于spark streaming来说，receiver是数据的源头。spark streaming的框架上，将receiver替换spark-core的以磁盘为数据源的做法，但是数据源（如监听某个tcp链接）显然不是可靠且不知道数据什么时候准备好的，所以spark streaming使用shuff...
分类：
其他好文 时间：
2015-02-05 14:58:43
阅读次数：
184
DStream是类似于RDD概念，是对数据的抽象封装。它是一序列的RDD，事实上，它大部分的操作都是对RDD支持的操作的封装，不同的是，每次DStream都要遍历它内部所有的RDD执行这些操作。它可以由StreamingContext通过流数据产生或者其他DStream使用map方法产生（与RDD一...
分类：
其他好文 时间：
2015-02-05 14:56:02
阅读次数：
260
StreamingContext 和SparkContex的用途是差不多的，作为spark stream的入口，提供配置、生成DStream等功能。总体来看，spark stream包括如下模块：/** * Main entry point for Spark Streaming functiona...
分类：
其他好文 时间：
2015-02-05 14:54:10
阅读次数：
293
DStreamGraph有点像简洁版的DAG scheduler，负责根据某个时间间隔生成一序列JobSet，以及按照依赖关系序列化。这个类的inputStream和outputStream是最重要的属性。spark stream将动态的输入流与对流的处理通过一个shuffle来连接。前面的（shu...
分类：
其他好文 时间：
2015-02-05 14:53:13
阅读次数：
302
场景：使用Spark Streaming接收Kafka发送过来的数据与关系型数据库中的表进行相关的查询操作；Kafka发送过来的数据格式为：id、name、cityId，分隔符为tab1 zhangsan 12 lisi 13 wangwu ...
分类：
数据库 时间：
2015-02-02 10:48:27
阅读次数：
169
Flash视频传送架构Flash 可以提供三种完全不同的视频传送机制：渐进式下载（progressive download）、流式传输（streaming）和HTTP流式传输（HTTP streaming）。 我将利用少许代码片段简单地说明所有上述三种传送机制。如果你使用视频播放器应用程序，则这些底...
分类：
其他好文 时间：
2015-01-31 14:31:34
阅读次数：
206
第二部分
1、昨天已经把网络摄像机的rtsp视频流成功利用FFmpeg和Nginx转换成rtmp流推送到了nginx视频服务器上面，并且通过vlc可以观看到直播视频。
今天继续昨天的工作，将rtsp的视频流推送到Nginx上面，客户端根据hls协议使用http在网页进行观看（推送的仍然是rtmp视频流），关于hls，先给一小段简单介绍：
HTTP Live Streaming（HLS）是苹果...
分类：
其他好文 时间：
2015-01-28 16:06:35
阅读次数：
1355
