一、filter,map,flatmap练习： 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words 3.全部转换为小写 4.去掉长度小于3的单词 5.去掉停用词 二、groupByKey练习 6.练习一的生成单词键值对 7.对单词进行分组 8.查看分组结果 学生科目成绩 ...
分类：
其他好文 时间：
2021-03-31 12:33:25
阅读次数：
0
一、filter,map,flatmap练习： 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words 3.全部转换为小写 4.去掉长度小于3的单词 5.去掉停用词 6.练习一的生成单词键值对 ...
分类：
其他好文 时间：
2021-03-31 12:22:01
阅读次数：
0
一、filter,map,flatmap练习： 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words 3.全部转换为小写 4.去掉长度小于3的单词 5.去掉停用词 6.练习一的生成单词键值对 最后相关文件已经保存。 ...
分类：
其他好文 时间：
2021-03-31 11:54:45
阅读次数：
0
1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words（map,flatmap） 3.全部转换为小写（lower（）） 4.去掉长度小于3的单词（filter） 6.练习一的生成单词键值对（map) ...
分类：
其他好文 时间：
2021-03-31 11:48:28
阅读次数：
0
一、filter,map,flatmap练习： 1.读文本文件生成RDD lines 2.将一行一行的文本分割成单词 words 3.全部转换为小写 4.去掉长度小于3的单词 5.去掉停用词 6.练习一的生成单词键值对 ...
分类：
其他好文 时间：
2021-03-31 11:44:46
阅读次数：
0
/* 总结：stl里数据结构，如hash(unordered_set\map),queue,deque,priority_queue,stack 主要会用以上数据结构的成员函数，empty(),count(),insert(),push(),push_back(),front(),top(),bac ...
分类：
其他好文 时间：
2021-03-30 13:58:40
阅读次数：
0
一、简介 1. deque（Double Ended Queues，双向队列）和向量很相似，但是它允许在容器头部快速插入和删除（就像在尾部一样）。 2. 资料网址：http://www.cplusplus.com/reference/deque/deque/ 3.实际上，deque是对vector和 ...
分类：
编程语言 时间：
2021-03-30 13:10:24
阅读次数：
0
更新多列 Updates 方法支持 struct 和 map[string]interface{} 参数。当使用 struct 更新时，默认情况下，GORM 只会更新非零值的字段 // 根据 `struct` 更新属性，只会更新非零值的字段 db.Model(&user).Updates(User{ ...
分类：
其他好文 时间：
2021-03-30 12:59:58
阅读次数：
0
1.MyJsonUtils.toJsonString 【toJsonString方法是自己定义的，详细如下】 public static String toJsonString(Object obj){ String jsonStr = null; try { jsonStr = mapper.wr ...
分类：
Web程序 时间：
2021-03-30 12:47:24
阅读次数：
0
最近flink job出现了背压的问题, 后果是导致了checkpoint的生成超时, 影响了flink job的运行. ...
分类：
其他好文 时间：
2021-03-30 12:44:32
阅读次数：
0
