1. 用Python编写WordCount程序并提交任务 程序 WordCount 输入 一个包含大量单词的文本文件 输出 文件中每个单词及其出现次数(频数),并按照单词字母顺序排序,每个单词和其频数占一行,单词和频数之间有间隔 编写map函数,reduce函数 # map函数 import sys ...
分类:
其他好文 时间:
2018-05-10 23:26:26
阅读次数:
172
用mapreduce 处理气象数据集 编写程序求每日最高最低气温,区间最高最低气温 ...
分类:
其他好文 时间:
2018-05-09 22:42:16
阅读次数:
181
用mapreduce 处理气象数据集 编写程序求每日最高最低气温,区间最高最低气温 ...
分类:
其他好文 时间:
2018-05-09 22:37:18
阅读次数:
156
注释: React JSX需要的注释格式是: {/*....*/} WebStorm默认的是: /*.....*/ 作为子节点 {/*...*/} 作为内联属性 /*.....*/ 多行注释 // 单行注释 写内联样式: var tdStyle = { border:0 } <td style={t ...
分类:
其他好文 时间:
2018-05-07 14:39:58
阅读次数:
163
1、使用高性能序列化类库2、优化数据结构3、对多次使用的RDD进行持久化/CheckPoint4、使用序列化的持久化级别5、Java虚拟机垃圾回收调优 降低RDD缓存占用空间的比例:new SparkConf().set("spark.storage.memoryFraction","0.5"),从 ...
分类:
其他好文 时间:
2018-05-06 19:59:43
阅读次数:
176
一、安装:npminstallreduxreact-redux二、入口文件:index.jsx:引入:创建reducer:创建容器:将容器绑定到属性:完整代码:varReact=require(‘react‘)varReactDom=require(‘react-dom‘)varCreateClass=require(‘create-react-class‘)varcreateStore=requ
分类:
其他好文 时间:
2018-05-06 11:09:49
阅读次数:
157
1.combineReducers (reducers) combineReducers 辅助函数的作用是,把一个由多个不同 reducer 函数作为 value 的 object,合并成一个最终的 reducer 函数,然后就可以对这个 reducer 调用 createStore。 合并后的 r ...
分类:
其他好文 时间:
2018-04-30 16:36:38
阅读次数:
193
流量统计案例--流量汇总求和 自定义bean的序列化实现 编写FlowSumMapper类 编写FlowBean类 流量统计案例--mapper的实现及编程中减少垃圾的编程技巧 编写FlowSumMapper类 编写FlowBean类 流量统计案例--reducer的实现及编程中减少垃圾的编程技巧 ...
分类:
其他好文 时间:
2018-04-25 16:57:47
阅读次数:
293
reduce函数 reduce() 方法对累加器和数组中的每个元素(从左到右)应用一个函数,将其减少为单个值。 对数组中的所有元素调用指定的回调函数。该回调函数的返回值为累积结果,并且此返回值在下一次调用该回调函数时作为参数提供。 <script> const array1 = [1, 2, 3, ...
分类:
编程语言 时间:
2018-04-19 21:55:56
阅读次数:
290
redux是从flux演变而来,但又独立于react。简言之就是,redux是一种单纯的状态管理器。可以和react搭配,也可以和其它框架搭配。 redux有三个重要的部分组成: store, action, reducer 其中store是一个对象,action是一个对象,reducer是一个纯函 ...
分类:
其他好文 时间:
2018-04-17 23:47:56
阅读次数:
186