Accumulator简介 Accumulator是spark提供的累加器,顾名思义,该变量只能够增加。 只有driver能获取到Accumulator的值(使用value方法),Task只能对其做增加操作(使用 +=)。你也可以在为Accumulator命名(不支持Python),这样就会在spa ...
分类:
其他好文 时间:
2017-12-03 00:35:35
阅读次数:
208
课程大纲:需求分析1、项目背景2、总体业务要求3、难点分析 数据收集1、数据采集阶段技术对比2、项目中数据采集技术Kafka3、Kafka安装及基本操作4、Kafka的API操作及项目中应用 数据流处理1、数据实时处理阶段技术拓展Storm2、Spark Streaming实用项目解决方案3、Spa ...
分类:
其他好文 时间:
2017-12-01 18:39:32
阅读次数:
459
题目: Two elements of a binary search tree (BST) are swapped by mistake. Recover the tree without changing its structure. Note:A solution using O(n) spa ...
分类:
编程语言 时间:
2017-12-01 13:35:36
阅读次数:
143
随着前端的发展,为了用户体验,H5越来越多的使用SPA架构,导致JS代码越来越多,体积也变的庞大,这时传统的ajax方式在首屏访问时就变得慢了,而且ajax在seo方面有天然的弱势,这时服务端渲染又回来了。我们使用React搭配ReactRouter等类库来实现服务端渲染,让首屏更快,seo更..
分类:
其他好文 时间:
2017-11-22 17:46:46
阅读次数:
178
传统的vue SPA页面在浏览器环境中使用,但是有的时候我们还希望能够做成一个类似于桌面的app在PC上使用,希望不仅可以使用所有的浏览器SPA的功能,你也可能外加host os的功能,比如文件的本地保存,离线使用等。这时,electron就是一个很好的备选方案。electron本身集成了一个chr ...
分类:
Web程序 时间:
2017-11-22 13:04:20
阅读次数:
241
首先保证这一篇分析查找算法的文章,气质与大部分搜索引擎搜索到的文章不同,主要体现在代码上面,会更加高级,会结合到很多之前研究过的内容,例如设计模式,泛型等。这也与我的上一篇 "面向程序员编程——精研排序算法" 不尽相同。 关键字:二分查找树,红黑树,散列表,哈希,索引,泛型,API设计,日志设计,测 ...
分类:
编程语言 时间:
2017-11-18 18:50:22
阅读次数:
198
根据一些公开资料整理,也许有失偏颇,仅供参考: 1.第一代 Hadoop 承载的 MapReduce 2.第二代 支持 DAG(有向无环图) 的框架: Tez 、 Oozie,主要还是还是批处理任务 3.第三代 Job 内部的 DAG(有向无环图) 支持(不跨越 Job),以及强调的实时计算:Spa ...
分类:
其他好文 时间:
2017-11-13 00:15:18
阅读次数:
242
vue-router 2.0 也适合做大型单页应用(SPA):通过一个页面不让用户有刷新,把所有东西都加载在内存里,近年越来越普遍,例网易云音乐 vue本身不支持路由,是通过vue-router插件的形式支持的 惰性加载:需要的时候才进行加载 安装命令:npm install vue-router ...
分类:
其他好文 时间:
2017-11-10 23:19:15
阅读次数:
237
spa(单页应用,vue)中,使用history模式时,微信长按识别二维码在ios下失效的问题。 触发条件: spa单页应用; 路由模式 history 从其他页面跳转到带有微信二维码识别的页面(不是直接打开该页面) ios版本的微信(实测版本6.5.19) 结果: 二维码长按无法识别,刷新页面后恢 ...
分类:
微信 时间:
2017-11-10 15:18:04
阅读次数:
574
调整 Spark 应用程序的内存使用情况和 GC behavior 已经有很多的讨论在 Tuning Guide 中.我们强烈建议您阅读一下.在本节中, 我们将在 Spark Streaming applications 的上下文中讨论一些 tuning parameters (调优参数). Spa ...
分类:
其他好文 时间:
2017-11-07 16:19:20
阅读次数:
283