一:说明 1.官网 指导网址:http://spark.apache.org/docs/1.6.1/streaming-kafka-integration.html 2.SparkStream+kafka Use Receiver 内部使用kafka的high lenel consumer API ...
分类:
其他好文 时间:
2018-08-10 01:31:06
阅读次数:
157
官网文档:《http://spark.apache.org/docs/latest/streaming-programming-guide.html#a-quick-example》 Spark Streaming官网的例子,简单的介绍了spark streaming接收socket流的数据,并把接 ...
分类:
其他好文 时间:
2018-08-10 01:29:33
阅读次数:
200
Fiddler有不同的代理模式,分为以下两种: 流模式(Streaming)和缓冲模式(Buffering)。 流模式可以理解为一种实时通信的模式,有请求就有返回,也就是实时返回。 缓冲模式是等所有请求都到了再一起返回,也就是等所有数据都准备好了以后才返回给客户端。 流模式更接近于浏览器本身真实的行 ...
分类:
其他好文 时间:
2018-08-08 13:51:12
阅读次数:
152
https://www.cnblogs.com/yaohaitao/p/5703288.html Spark Streaming与Storm的应用场景 对于Storm来说:1、建议在那种需要纯实时,不能忍受1秒以上延迟的场景下使用,比如实时金融系统,要求纯实时进行金融交易和分析2、此外,如果对于实时 ...
分类:
其他好文 时间:
2018-08-07 13:01:12
阅读次数:
164
综述: 在Flink中DataStream程序是在数据流上实现了转换的常规程序。 1.示范程序 2.数据源 程序从源读取输入。可以通过StreamExecutionEnvironment.addSource(sourceFunction)给程序附上源。 在StreamExecutionEnviron ...
一、nifi基本配置 1. 修改各节点主机名,修改/etc/hosts文件内容。 具体请参考《Kafka:ZK+Kafka+Spark Streaming集群环境搭建(一)VMW安装四台CentOS,并实现本机与它们能交互,虚拟机内部实现可以上网。》 2. 安装zookeeper分布式集群具体请参考 ...
分类:
其他好文 时间:
2018-08-06 19:17:08
阅读次数:
216
LIVE555 Streaming Media This code forms a set of C++ libraries for multimedia streaming, using open standard protocols (RTP/RTCP, RTSP, SIP). These li ...
分类:
其他好文 时间:
2018-08-01 16:40:17
阅读次数:
167
一、什么是HTTP Dynamic Streaming 使用传统的HTTP协议进行在线播放叫做“渐进下载”,所有的视频内容从头到尾必须从服务器传输到客户端,用户只能在传输完的视频长度中选择播放点,而不能自定义播放点及传输点,比如我们在看视频的时候是边下边看,没下载完则看不了,而且也不能绕到视频后面的 ...
分类:
其他好文 时间:
2018-07-24 23:40:09
阅读次数:
310
可以基于checkpoint恢复offset--------->Driver HA ...
分类:
其他好文 时间:
2018-07-22 14:12:32
阅读次数:
122