日期:2019.10.30 博客期:114 星期三 实验6:Mapreduce实例——WordCount 实验说明: 1、 本次实验是第六次上机,属于验证性实验。实验报告上交截止日期为2018年11月16日上午12点之前。 2、 实验报告命名为:信1605-1班学号姓名实验六.doc。 实验目的 1 ...
分类:
其他好文 时间:
2019-10-30 18:50:47
阅读次数:
137
实验目的 1.准确理解Mapreduce的设计原理 2.熟练掌握WordCount程序代码编写 3.学会自己编写WordCount程序进行词频统计 实验原理 MapReduce采用的是“分而治之”的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个从节点共同完成,然后通过整合各个节点的中间结 ...
分类:
其他好文 时间:
2019-10-30 18:45:16
阅读次数:
105
Spark(二)算子讲解 @[toc] 一、wordcountcount 基于上次的wordcount,我们来写一个wordcountcount,来对wc程序进行第二次计数,我们来分析一下性能。 通过性能图,我们可以知道: 1.Spark如果不对其结果进行存储或输出,那么Spark将不会处理map或 ...
分类:
其他好文 时间:
2019-10-28 14:58:09
阅读次数:
76
Github链接:https://github.com/Robot Blitzcrank/wordCount 模块设计 本次的编程分为以下几个模块: 组员职责分工 程序运行截图 提交日志截图 ...
分类:
其他好文 时间:
2019-10-19 14:57:20
阅读次数:
76
github 的链接 Github地址: https://github.com/MokouTyan/wordCount 模块分类 分为六个模块: 文件的命令行输入判断 将所有大写文本转为小写 单词词组合法化判断 单词词组统计 词频排序 打印输出 组员职责分工 程序运行截图 提交日志截图 ...
分类:
其他好文 时间:
2019-10-19 13:10:14
阅读次数:
64
GitHub链接:https://github.com/Q1176011838/wordcount 一、模块设计 我们小组将这次代码分八部分。1、主函数 2、统计文件单词总数 3、统计文件有效行数 4、将统计数据写入文件、数据输入、统计词组及词频 5、处理命令行输入 6、统计ascii码 7、数据输 ...
分类:
其他好文 时间:
2019-10-19 12:54:19
阅读次数:
77
软件工程实践团队编程 1. 团队github链接: "wordCount" 2. 团队提交日志截图: 3. 程序运行截图: 4. 组员职责分工: 031702430 陈友昆:设计统计文件的单词总数的模块,博客编写; 031702143 蔡智伟、031702414 陆志阳、031702136李爱军: ...
分类:
其他好文 时间:
2019-10-19 12:53:26
阅读次数:
101
[TOC] Part1 Github项目地址 | Fork仓库的Github项目地址 | git@github.com:JusticeXu/WordCount.git | | : : | | | 结对伙伴GIthub地址 | "npc1158947015" | Part2 PSP表格 | PSP2. ...
分类:
其他好文 时间:
2019-10-16 11:25:31
阅读次数:
70
结对编程实验报告 | GIT仓库地址 | https://github.com/ycl web/WordCount | | | | | 结对伙伴 | 徐鹏201831061408 | | 延昌磊博客 | https://www.cnblogs.com/ycldbk/ | | 徐鹏博客 | https ...
分类:
其他好文 时间:
2019-10-16 09:55:33
阅读次数:
72
结对编程实验报告 | GIT仓库地址 | https://github.com/ycl web/WordCount | | | | | 结对伙伴 | 延昌磊201831061410 | | 延昌磊博客 | https://www.cnblogs.com/ycldbk/ | | 徐鹏博客 | http ...
分类:
其他好文 时间:
2019-10-16 09:16:28
阅读次数:
118