本期内容
本讲讲解sparkStreaming的driver部分的数据的接受和管理的部分，即receiverTracker，包括：
1.receiverTracker的架构设计
2.消息循环系统
3.receiverTracker的具体实现。...
分类：
其他好文 时间：
2016-05-30 15:32:58
阅读次数：
290
本期内容 : Direct Acess Kafka Spark Streaming接收数据现在支持的两种方式： 01、 Receiver的方式来接收数据，及输入数据的控制 02、 No Receiver的方式 以上两种方式中，No Receiver的方式更符合读取、操作数据的思路，Spark作为一个 ...
分类：
其他好文 时间：
2016-05-30 07:39:17
阅读次数：
159
本讲内容：a. Receiver启动的方式设想
b. Receiver启动源码彻底分析注：本讲内容基于Spark 1.6.1版本（在2016年5月来说是Spark最新版本）讲解。上节回顾上一讲中，我们给大家具体分析了RDD的物理生成和逻辑生成过程，彻底明白DStream和RDD之间的关系，及其内部其他有关类的具体依赖等信息：a. DStream是RDD的模板，其内部generatedRDDs 保...
分类：
其他好文 时间：
2016-05-30 06:33:53
阅读次数：
231
1.昨天做了什么？ 解决了控件有时不能充满整个屏幕的问题，继续实现关注的功能，用户可以对感兴趣的消息进行关注，以便获取该消息的最新动态 2.今天要做什么？ 解决在一个单实例的对象中，有个注册监听器的行为，传给这个单实例对象的context，会出现:receiver leak的错误的问题，继续实现关注 ...
分类：
其他好文 时间：
2016-05-30 00:51:32
阅读次数：
207
1.昨天做了什么？ 解决在一个单实例的对象中，有个注册监听器的行为，传给这个单实例对象的context，会出现:receiver leak的错误的问题，继续实现关注的功能，用户可以对感兴趣的消息进行关注，以便获取该消息的最新动态 2.今天要做什么？ 弄明白退出activity 对一些资源以及状态的操 ...
分类：
其他好文 时间：
2016-05-30 00:41:26
阅读次数：
184
上篇文章详细解析了Receiver不断接收数据的过程，在Receiver接收数据的过程中会将数据的元信息发送给ReceiverTracker：本文将详细解析ReceiverTracker的的架构设计和具体实现一、ReceiverTracker的主要功能 ReceiverTracker的主要功能有： ... ...
分类：
其他好文 时间：
2016-05-28 13:04:02
阅读次数：
162
1。数据接收架构设计模式
2。数据接收源码彻底研究sparkstreaming接收数据的特征：
第一个特征：不断地持续地接收数据；
第二个特征：一般receiver和driver不再同一个进程中，接受后不断地汇报给driver，driver根据接受到的数据的元数据来负责调度架构上看，有个循环器不断地接收数据，存储数据，汇报给driver，其中接收数据和存储数据不是同一个对象负责。receive...
分类：
其他好文 时间：
2016-05-27 11:19:04
阅读次数：
280
Android 面试题总结之Android 基础Service（四）
在上一章节Android 面试题总结之Android 基础Broadcast Receiver（三） 我们讲了Broadcast Receiver基础知识。本节主要讲解Service相关基础知识，Service也是我们开发过程中经常使用到。
在阅读过程中有任何问题，请及时联系。如需转载请注明 fuchenxuan d...
分类：
移动开发 时间：
2016-05-26 17:17:17
阅读次数：
281
本期内容 : 数据接收架构设计模式 数据接收源码彻底研究 一、Spark Streaming数据接收设计模式 Spark Streaming接收数据也相似MVC架构： 1、 Mode相当于Receiver存储数据，C级别的，Receiver是个抽象因为他有好多的Receiver 2、 Receive ...
分类：
其他好文 时间：
2016-05-24 20:44:13
阅读次数：
176
本期内容 : ReceiverTracker的架构设计 消息循环系统 ReceiverTracker具体实现 一、 ReceiverTracker的架构设计 1、 ReceiverTracker可以以Driver中的具体自己的算法来在具体的Execute中启动Receiver，启动Receiver的 ...
分类：
其他好文 时间：
2016-05-24 20:32:14
阅读次数：
215
