1.Python 爬虫介绍 一、什么是爬虫 爬虫：一段自动抓取互联网信息的程序，从互联网上抓取对于我们有价值的信息。 二、Python爬虫架构 Python 爬虫架构主要由五个部分组成，分别是调度器、URL管理器、网页下载器、网页解析器、应用程序（爬取的有价值数据）。 调度器：相当于一台电脑的CPU ...
分类：
编程语言 时间：
2018-11-11 18:00:02
阅读次数：
159
网上有一个软件，叫什么鬼哥Csdn免积分下载器，我试了一下，并不能用，很坑的。 鉴于现在CSDN的所有资源都需要积分才能下载，以前的资源都不免费了，没有0积分的资源了。所以为了解决部分人的下载问题，我给大家提供一下下载服务！ 我个人的积分给大家看看！ 如果以后积分用完了，我会开VIP的继续为大家服务 ...
分类：
其他好文 时间：
2018-11-07 18:17:48
阅读次数：
608
Downloader Middlewares（下载器中间件） 下载器中间件是引擎和下载器之间通信的中间件。在这个中间件中我们可以设置代理、更换请求头等来达到反反爬虫的目的。要写下载器中间件，可以在下载器中实现两个方法。一个是 ，这个方法是在请求发送之前执行，还有一个是 ，这个方法是数据下载到引擎之前 ...
分类：
其他好文 时间：
2018-10-27 23:32:05
阅读次数：
290
Request对象： 对象在我们写爬虫，爬取一页的数据需要重新发送一个请求的时候调用。这个类需要传递一些参数，其中比较常用的参数有： 1. ：这个request对象发送请求的url。 2. ：在下载器下载完相应的数据后执行的回调函数。 3. ：请求的方法。默认为 方法，可以设置为其他方法。 4. ： ...
分类：
其他好文 时间：
2018-10-27 22:58:54
阅读次数：
260
CSDN免积分下载器是一款CSDN网站资源下载工具，CSDN下载器可以免登陆免积分下载需要积分的资源，不用再去为积分问题而苦恼。由于CSDN不知道什么时候会继续改版或者变动，所以不保证这个CSDN免积分下载器的长期有效哦。CSDN上有很多用户上传的好资料，不过好些都需要下载积分，很多网友总是搜到了C ...
分类：
其他好文 时间：
2018-10-19 14:15:40
阅读次数：
301
一、搭建 Aria2 以及 AriaNg Web UI 选择使用Docker 参考 aria2-ariang-docker 以及 aria2-ariang-x-docker-compose 二、配置aria2.conf(可跳過) 这个文件是从作者地 Github下载下来的，主要加了代理，而这个代理是 ...
分类：
其他好文 时间：
2018-10-07 16:48:56
阅读次数：
286
找到 mgblihnaaedmhhgadafknogahbgejnno\当前版本号(0.0.1_0)\popup.html <html> <head> <meta charset="utf-8">/* 这行就是添加了 这样就没乱么了。*/ </head> ...
分类：
其他好文 时间：
2018-10-06 21:35:48
阅读次数：
115
http://pandownload.com/index.html 作者提示：1.软件使用 C++ 编写2.大文件需要等待一段时间才会有下载速度3.文件名含有特殊字符可能会下载出错，请重命名再下载4.扫码登录有BUG，请使用账号登录 ...
分类：
其他好文 时间：
2018-10-04 21:35:59
阅读次数：
195
异常的意义:马克-to-win： （视频下载） （全部书籍）通过上面的例子，我们看出通过引入异常这种技术,即使出现不测（用户把0赋给除数），也可以让程序不崩溃，还能继续优雅的运行。那，这种技术有用，值得学。马克-to-win：当你批量下载文件时，如出现什么错误，你是不是希望下载器能告诉你出现了什么问 ...
分类：
编程语言 时间：
2018-09-24 11:27:34
阅读次数：
125
PanDownload是一款坚持以用户体验为中心，畅快淋漓的下载为理念而打造的下载工具。 从2017年2月9日首个版本推出，时至今日已经一年七个月了，首先感谢大家一直以来的支持与建议，促使着我不断地对软件进行完善。 历时半年之久，180多个日日夜夜的开发与测试，今天给大家带来全新的2.0版本，全新构 ...
分类：
其他好文 时间：
2018-09-24 11:24:10
阅读次数：
181
