爬虫的分类 按使用场景： 1. 通用爬虫：指搜索引擎的爬虫 2. 聚焦爬虫：指针对特定网站的爬虫 聚焦爬虫又可以分为大致3种： 1. 累积式爬虫: 从开始到结束,一直不断爬取，过程中会进行去重操作； 2. 增量式爬虫: 对已经下载的网页采取增量式更新和只爬行新产生的或者已经发生变化网页的爬虫； 3. ...
分类：
其他好文 时间：
2018-01-03 11:45:06
阅读次数：
165
心理学研究什么《心理学与生活》 第一章 生活中的心理学 第二章 心理学的研究方法（实验与统计） 第三章 行为的生物学基础（神经元、动作电位、神经递质等等） 第四章 感觉（信号检测，如何感觉声音、色彩、温度等） 第五章 知觉（感觉的下一步、把歌声和唱歌的人视觉信息组合在一起；错觉， "贴吧" ） 第六 ...
分类：
其他好文 时间：
2018-01-02 18:45:19
阅读次数：
282
张明倬：此次制作的项目“铁大e吧”，在第一周的冲刺之后，只完成了贴吧能够实现的基本功能，例如评论回复，修改个人信息，查看他人的表白，并未针对表白墙方面做进一步的深研与探索，并未凸显出表白墙所有的特色，我们会认真采取老师和各组的建议。在下一波冲刺时我们会对界面进行进步的优化，并针对用户，站在用户角度进 ...
分类：
其他好文 时间：
2017-12-30 17:03:07
阅读次数：
84
第一阶段做出的成果“铁大e吧”，各组对我们的程序做出来客观的评价，下面意见总结如下： 1.没有鲜明的表白特色，仅实现了贴吧的基本功能，下一阶段需要进一步做出突出表白墙特色的贴吧。 2.界面需要优化，此次界面比较简洁，需要进一步的美观优化，符合用户需求。 3.建议实现用户第一时间接收到表白信息的功能以 ...
分类：
其他好文 时间：
2017-12-29 21:45:06
阅读次数：
143
此次制作的项目“铁大e吧”，在第一周的冲刺之后，只完成了贴吧能够实现的基本功能，例如评论回复，修改个人信息，查看他人的表白，并未针对表白墙方面做进一步的深研与探索，并未凸显出表白墙所有的特色，我们会认真采取老师和各组的建议。在下一波冲刺时我们会对界面进行进步的优化，并针对用户，站在用户角度进行相应的 ...
分类：
其他好文 时间：
2017-12-29 21:44:30
阅读次数：
114
1、urllib和urllib2区别实例 urllib和urllib2都是接受URL请求相关模块，但是提供了不同的功能，两个最显著的不同如下： urllib可以接受URL，不能创建设置headers的Request类实例，urlib2可以。 url转码 https://www.baidu.com/s ...
分类：
Web程序 时间：
2017-12-24 15:11:00
阅读次数：
485
前几天有位微信读者问我一个爬虫的问题，就是在爬去百度贴吧首页的热门动态下面的图片的时候，爬取的图片总是爬取不完整，比首页看到的少。原因他也大概分析了下，就是后面的图片是动态加载的。他的问题就是这部分动态加载的图片该怎么爬取到。 分析 他的代码比较简单，主要有以下的步骤：使用 库，打开百度贴吧的首页地 ...
分类：
编程语言 时间：
2017-12-23 11:57:13
阅读次数：
1157
本篇是使用XPath的案例，更多内容请参考: "Python学习指南" 案例：使用XPath的爬虫 现在我们用XPath来做一个简单的爬虫，我们尝试爬取某个贴吧里的所有帖子且将该帖子里每个楼层发布的图片下载到本地。 ...
分类：
编程语言 时间：
2017-12-12 00:15:35
阅读次数：
252
使用方法 python 代码所在文件名 美女 3 ...
分类：
编程语言 时间：
2017-12-12 00:08:59
阅读次数：
204
指针定义成全局和定义在main中为什么不一样？定义在main中执行中止 Leetcode441ArrangingCoins 我更喜欢朴素的C式的C++，而不是java式的C++ vs2017的使用 9hb谝释雇http://p.baidu.com/ihome/center?uid=1a4a61626 ...
分类：
Web程序 时间：
2017-12-03 11:21:50
阅读次数：
227
