欢迎关注【无量测试之道】公众号，回复【领取资源】,Python编程学习资源干货、Python+Appium框架APP的UI自动化、Python+Selenium框架Web的UI自动化、Python+Unittest框架API自动化、 资源和代码 免费送啦~文章下方有公众号二维码，可直接微信扫一扫关注 ...
分类：
其他好文 时间：
2020-09-07 18:43:26
阅读次数：
45
前序 最近在研究反爬虫策略，写了一个大众点评评论采集的程序，途中遇到了一些坑有感而发分享给大家，大众点评是基于css机制实现的字体加密技术来阻碍我的进行准确数据的抓取 正文 图1 根据图1我们可以看出部分文字在源码中是无法得到正常显示的，对应的我们解析也只能得到一些无用的svg标签,且又由于文字本身 ...
分类：
编程语言 时间：
2020-09-04 17:42:55
阅读次数：
70
前言 大部分人在使用selenium定位元素时，用的是xpath定位，因为xpath基本能解决定位的需求。css定位往往被忽略掉了，其实css定位也有它的价值，css定位更快，语法更简洁。 一、css：属性定位 1.css可以通过元素的id、class、标签这三个常规属性直接定位到 2.如下是百度输 ...
分类：
编程语言 时间：
2020-09-04 17:16:52
阅读次数：
57
【一、项目背景】[蜜柑计划-MikanProject]：新一代的动漫下载站。是一个专门为喜欢动漫的小伙伴们打造的动漫视频在线播放网站，为大家第一时间分享最新动漫资源，每日精选最优质的动漫推荐。【二、项目目标】实现获取动漫种子链接，并下载保存在文档。【三、涉及的库和网站】1、网址如下：https://mikanani.me/Home/Classic/{}2、涉及的库：reques**ts、lxml、
分类：
编程语言 时间：
2020-09-04 17:01:02
阅读次数：
58
高性能异步爬虫目的：在爬虫中使用异步实现高性能的数据爬取操作异步爬虫的方式： - 多线程、多进程（不建议）： 好处：可以为相关阻塞的操作单独开启多线程或进程，阻塞操作就可以异步执行; 弊端：无法无限制的开启多线程或多进程。 - 线程池、进程池（适当的使用）： 好处：我们可以降低系统对进程或线程创建和 ...
分类：
编程语言 时间：
2020-08-31 13:23:39
阅读次数：
70
学习爬虫，其乐无穷！今天给大家带来一个爬虫案例，爬取糗事百科搞笑内涵段子。爬取糗事百科段?，假设??的 URL 是：http://www.qiushibaike.com/8hr/page/1 一、爬取要求： 使?requests 获取??信息，?XPath / re 做数据提取。 获取每个帖??的 ...
分类：
编程语言 时间：
2020-08-31 13:21:14
阅读次数：
69
UI自动化测试工具 1. uiautomator2 （python） Github地址：https://github.com/openatx/uiautomator2star: 1.9k介绍: openatx开源的ui自动化工具，支持android和ios。主要面向的编程语言是python，api设 ...
分类：
移动开发 时间：
2020-08-31 11:55:18
阅读次数：
74
文章目录 一、实现效果 1. python代码 2. 运行效果 二、基本思路 1. 爬虫部分 2. tkinter界面 一、实现效果 很多人学习python，不知道从何学起。很多人学习python，掌握了基本语法过后，不知道在哪里寻找案例上手。很多已经做案例的人，却不知道如何去学习更加高深的知识。那 ...
分类：
编程语言 时间：
2020-08-28 15:03:53
阅读次数：
87
对于企业方面来说，黑产工具情报可以有效的提高业务安全的***效率。通过分析工具利用的业务接口，不仅可以将黑产作恶行为进行有效的追踪，对其进行有效的处理，还能强化业务层面对安全的认知，知晓业务接口中的安全薄弱点，并进行持续性的安全加固。接下来我们以恶意爬虫、抢券工具和注册机三种工具来谈一下黑产工具情报的分析方式。案例1：恶意爬虫工具分析爬虫工具：xx采集/批量去水印.exe工具用户：需要批量下载某短视
分类：
其他好文 时间：
2020-08-28 11:51:08
阅读次数：
52
本节主要内容有：通过requests库模拟表单提交通过pandas库提取网页表格上周五，大师兄发给我一个网址，哭哭啼啼地求我：“去!把这个网页上所有年所有县所有作物的数据全爬下来，存到Access里!”我看他可怜，勉为其难地挥挥手说：“好嘞，马上就开始!”目标分析大师兄给我的网址是这个：https://www.ctic.org/crm?tdsourcetag=s_pctim_aiomsg打开长这样
分类：
编程语言 时间：
2020-08-25 15:58:21
阅读次数：
55
