码迷,mamicode.com
首页 > 其他好文 > 详细

词频统计

时间:2019-04-01 18:40:30      阅读:212      评论:0      收藏:0      [点我收藏+]

标签:软工   码云   信息   姓名   技术   读取文件   inf   性能分析   字符   

1.个人信息
学号:2017*****7238。
姓名:尚志尊
我的码云仓库地址:https://gitee.com/shangzhizun/word_frequency/tree/SE7238
2.程序分析
首先通过传入dst参数,读取文件,最终返回dst文件的字符串形式bvffer。
技术图片

将bvffer字符串进行,小写,去除除了小写字母和空白字符的其他字符,把空白字符换成空格
技术图片

最好返回字典,output_result函数传入上面的字典word_freq参数,输出词频前10的单词
技术图片

运行结果
大文件
python word_freq.py Gone_with_the_wind.txt
技术图片

小文件
python word_freq.py A_Tale_of_Two_Cities.txt
技术图片

3.简单性能分析并改进、提交代码
python -m cProfile word_freq.py filescounted.txt
技术图片

总共有3320次函数调用,程序总共耗时0.006秒
技术图片

其中process_buffer占用了,0.000秒
技术图片
执行次数最多的是strip函数

4.北软软工/词频统计中有其分支:
技术图片
5.总结
对于这次的作业,是我第一次接触,有一些代码都在网上查找并结合总结做出来的。让我对于python又更加的理解了,明白了许多知识。更加一点了解了。以后会更加学习,总结独立完成任务。

词频统计

标签:软工   码云   信息   姓名   技术   读取文件   inf   性能分析   字符   

原文地址:https://www.cnblogs.com/shangzhizun/p/10637409.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!