这一两年Spark技术很火，自己也凑热闹，反复的试验、研究，有痛苦万分也有欣喜若狂，抽空把这些整理成文章共享给大家。这个系列基本上围绕了Spark生态圈进行介绍，从Spark的简介、编译、部署，再到编程模型、运行架构，最后介绍其组件SparkSQL、Spark Streaming、Spark MLi ...
分类：
其他好文 时间：
2018-03-08 10:36:17
阅读次数：
183
spark streaming 程序设置jvm参数 spark streaming 程序设置jvm参数,比如添加jconsole 远程连接参数： 完整例子 ...
分类：
其他好文 时间：
2018-03-07 20:10:10
阅读次数：
724
一、API功能分类： 图层类（Map 》ILayer）js4.0版本以后添加SceneLayer（ The SceneLayer is a layer type designed for on-demand streaming and displaying large amounts of data ...
分类：
编程语言 时间：
2018-03-07 18:57:38
阅读次数：
195
KafkaStreaming.scala文件 JournalArticleDataManagerAdd.scala文件 KafkaManagerAdd.scala文件 SolrAdd.scala文件 ...
分类：
数据库 时间：
2018-03-01 19:58:44
阅读次数：
433
[时间：2018 01] [状态：Open] [关键词：流媒体，stream，HLS] 0 HLS背景及初衷 HLS是由苹果公司发起的流媒体网络传输协议，可参考 "rfc8261 HTTP Live Streaming" 。它的工作原理是把整个流分成一个个小的基于HTTP的文件来下载，每次只下载一些 ...
分类：
其他好文 时间：
2018-02-28 22:55:27
阅读次数：
204
http://www.talkwithtrend.com/Question/177983-1247453 一些测试的描述如下内容最为详细，供你参考： 测试对于验证系统的正确性、分析系统的性能来说非常重要，但往往容易被我们所忽视。为了能对系统有更全面的了解、能找到系统的瓶颈所在、能对系统性能做更好的改 ...
分类：
其他好文 时间：
2018-02-27 11:34:51
阅读次数：
165
用于Kafka 0.10的结构化流集成从Kafka读取数据并将数据写入到Kafka。 1. Linking 对于使用SBT/Maven项目定义的Scala/Java应用程序，用以下工件artifact连接你的应用程序： 对于Python应用程序，你需要在部署应用程序时添加上面的库及其依赖关系。查看D ...
分类：
其他好文 时间：
2018-02-26 17:41:51
阅读次数：
431
一、Spark Streaming的介绍 1. 流处理 流式处理(Stream Processing)。流式处理就是指源源不断的数据流过系统时，系统能够不停地连续计算。所以流式处理没有什么严格的时间限制，数据从进入系统到出来结果可能是需要一段时间。然而流式处理唯一的限制是系统长期来看的输出速率应当快 ...
分类：
其他好文 时间：
2018-02-25 19:16:10
阅读次数：
281
这个版本是 Structured Streaming 的一个重要里程碑，因为其终于可以正式在生产环境中使用，实验标签（experimental tag）已经被移除。在流系统中支持对任意状态进行操作；Apache Kafka 0.10 的 streaming 和 batch API支持读和写操作。除了 ...
分类：
Web程序 时间：
2018-02-22 13:36:22
阅读次数：
203
