1.在settings中开启Cookie COOKIES_ENABLED = True 2.重写 start_requests方法 初始化开始url（方便添加cookie） 列： from scrapy import Request class ASpider(CrawlSpider): name ...
分类：
其他好文 时间：
2021-06-25 16:45:37
阅读次数：
0
java电子书 下载全部java电子书 链接: https://pan.baidu.com/s/1AsLTMzc8k4_X5xUswbw2_Q 密码: vvu1 java编程思想pdf 下载：百度网盘 链接: https://pan.baidu.com/s/1zYal1aaiLs0zO8vwirYM ...
分类：
编程语言 时间：
2021-02-05 10:37:18
阅读次数：
0
简介 Data URI 定义的内容可以作为小文件被插入到其他文档之中。Data URI 的格式十分简单，如下所示： data:[<mime type>][;charset=<charset>][;base64],<encoded data> 第一部分是 data: 协议头，它标识这个内容为一个 da ...
分类：
Web程序 时间：
2020-12-21 11:06:28
阅读次数：
0
kubernetes快速入门12-dashboard更多信息请参考：https://github.com/kubernetes/dashboard安装#安装k8s@node01:~$kubectlapply-fhttps://raw.githubusercontent.com/kubernetes/dashboard/v2.0.3/aio/deploy/recommended.yamlnamesp
分类：
Web程序 时间：
2020-09-18 02:46:38
阅读次数：
54
前言 随着大型网站反扒机制的增强，更改IP登陆已经成为一种最高效的方式，为此打造一款超强IP池项目，采用最新最快的Python技术——异步（Async ）。编写了一个免费的异步爬虫代理池，以 Python asyncio 为基础，充分利用 Python 的异步性能，异步处理比同步处理能提升成百上千倍 ...
分类：
其他好文 时间：
2020-08-15 23:56:25
阅读次数：
119
偶然翻滴滴官网看到首页下翻第六栏（大概）有个绚丽的地球的三维动画，试着用there.js实现了下，基本实现了动画效果，不过还是有些问题；这个动画看似简单，但也用到好的绘制方法和计算，这里先写一下主要功能的实现； 先看示例：http://39.106.166.212:8080/webgl/t4（由于是 ...
分类：
Web程序 时间：
2020-07-13 09:26:09
阅读次数：
220
1 简介 参考视频：https://www.bilibili.com/video/BV1XW411x7NU?p=40 Qt绘图设备有三种：QPixmap、QBitmap、QImage、QPicture。 QPixmap：专门针对屏幕进行优化了，和平台相关，不能对图片进行修改。 QBitmap：QPi ...
分类：
其他好文 时间：
2020-07-06 01:33:42
阅读次数：
95
如何实现分布式？ 安装一个scrapy-redis的组件 原生的scrapy是不可以实现分布式爬虫，必须要让scrapy结合着scrapy-redis组件一起实现分布式 为什么原生的scrapy不可以实现分布式？ 调度器不可以被分布式集群共享 管道不可以被分布式集群共享 scrapy-redis组件 ...
分类：
其他好文 时间：
2020-07-05 17:03:11
阅读次数：
62
先来个工具操作 1、获取链接https://www.huya.com/g/xingxiu 2、删除字段、增加字段、开始采集 3、启动 4、运行中 5、采的太多了我就停止了 6、导出数据Excel格式 7、查看本地文件 8、导入到mysql数据库 9、mysql配置 10、选择导出设置 11、查看my ...
分类：
其他好文 时间：
2020-06-28 15:35:02
阅读次数：
93
##20199130 2019-2020-2 《网络攻防实践》综合大实践 ###kAFL: Hardware-Assisted Feedback Fuzzing for OS Kernels ###一、论文信息 ###1.1 论文相关信息 作者：Sergej Schumilo, Cornelius ...
分类：
其他好文 时间：
2020-06-28 11:17:17
阅读次数：
101
