2019 年 11 月，DropBox 官博发布了一篇《感谢你，Guido》的文章，透露出龟叔（Guido van Rossum）要离职退休的消息。后来龟叔自己也在推特证实了。 时隔一年，就在今天（2020 年 11 月 13 日）凌晨 1 点，龟叔在推特上宣布了一个大新闻，他要加入微软！！！ 龟叔 ...
分类：
编程语言 时间：
2020-11-19 12:30:40
阅读次数：
11
使用Turbine监控集群监控，在测试的时候出现了一些问题 http://localhost:9003/turbine.stream 没有获取到数据 http://localhost:9003/hystrix/monitor 监控界面一直loading 后台报Property or field 'd ...
分类：
移动开发 时间：
2020-11-19 12:14:31
阅读次数：
16
接口自动化测试三部曲：1、构造请求 2、判断结果 3、数据库查询 1、Python的第三方包：requests 简介：requests可以用来做接口测试、接口自动化测试、爬虫等 requests的环境搭建：管理员身份在cmd运行：pip3 install requests -i https://py ...
分类：
编程语言 时间：
2020-11-18 13:19:45
阅读次数：
23
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理 以下文章来源于腾讯云，作者：张凝可 很多网站为了避免被恶意访问，需要设置验证码登录，避免非人类的访问，Python爬虫实现验证码登录的原理则是先到登录页面将生成的验证码保存下来，然后 ...
分类：
编程语言 时间：
2020-11-18 13:00:48
阅读次数：
12
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理 以下文章来源于腾讯云，作者：周小董 重定向问题 在使用python爬虫的过程中难免会遇到很多301，302的问题。他们出现时，很大程度的影响到我们的爬虫速度和信息的准确性。下面针对不 ...
分类：
编程语言 时间：
2020-11-18 12:55:55
阅读次数：
8
cookie cookie 是存储于访问者的计算机中的变量，可以让我们用同一个浏览器访问同一个域名的时候共享数据。 由于HTTP 是无状态协议。简单地说，当你浏览了一个页面，然后转到同一个网站的另一个页面，服务器无法认识到这是同一个浏览器在访问同一个网站。每一次的访问，都是没有任何关系的。Cooki ...
分类：
其他好文 时间：
2020-11-17 11:55:05
阅读次数：
3
可能99%的同学不做搜索引擎，但99%的同学一定实现过检索功能。搜索，检索，这里面到底包含哪些技术的东西，希望本文能够给大家一些启示。全网搜索引擎架构与流程如何？全网搜索引擎的宏观架构如上图，核心子系统主要分为三部分（粉色部分）：（1）spider爬虫系统；（2）search&index建立索引与查询索引系统，这个系统又主要分为两部分：一部分用于生成索引数据build_index一部分用于
分类：
其他好文 时间：
2020-11-16 13:57:29
阅读次数：
12
1, 下载：https://github.com/gerhardberger/electron-pdf-window 存到目录下，如d:\dev 2,用electron执行nodejs文件 electron.exe index.js index.js const { app, BrowserWind ...
分类：
Web程序 时间：
2020-11-16 13:35:15
阅读次数：
19
一.关于爬虫爬虫，是一种按照一定的规则自动地抓取互联网信息的程序。本质是利用程序获取对我们有利的数据。反爬虫，从不是将爬虫完全杜绝；而是想办法将爬虫的访问量限制在一个可接纳的范围，不要让它过于频繁。二.提高爬虫效率的方法协程。采用协程，让多个爬虫一起工作，可以大幅度提高效率。多进程。使用CPU的多个核，使用几个核就能提高几倍。多线程。将任务分成多个，并发（交替）的执行。分布式爬虫。让多个设备去跑同
分类：
其他好文 时间：
2020-11-12 14:10:38
阅读次数：
9
自学过编程的小伙伴都知道，在学习的过程中，不仅仅要记下很多的知识点，而且那些知识点，都是非常的干，很干，很干，没有一点乐趣的感觉..... 所以在很多人学习Python的人，也许他的基础知识还没有学好，就会选择去看一些爬虫的案例，然后也会自己尝试的去写一些爬虫的案例，但是一碰见BUG 就不知道怎么办 ...
分类：
编程语言 时间：
2020-11-12 13:57:26
阅读次数：
12
