pyppteer用于抓取网页中动态加载的内容，也可以用于模拟登陆 ...
分类：
其他好文 时间：
2019-09-27 22:51:46
阅读次数：
122
selenium自动化测试工具可谓是爬虫的利器,基本动态加载的网页都能抓取,当然随着大型网站的更新,也出现针对selenium的反爬,有些网站可以识别你是否用的是selenium访问,然后对你加以限制. 当当网目前还没有对这方面加以限制,所以今天就用这个练习熟悉一下selenium操作,我们可以试一 ...
分类：
其他好文 时间：
2019-09-24 10:35:29
阅读次数：
118
1.get请求 （使用file_get_contents（）函数也可以实现get请求） 2.post模拟登陆 处理页面 ...
分类：
Web程序 时间：
2019-09-16 17:52:09
阅读次数：
104
1、添加依赖 2、Api说明 1. 首先构造一个连接器，传入一个需要登陆的ip地址； 2. 模拟登陆目的服务器，传入用户名和密码； 它会返回一个布尔值，true 代表成功登陆目的服务器，否则登陆失败。 3. 打开一个session，执行你需要的linux 脚本命令； 4. 接收目标服务器上的控制台返 ...
分类：
编程语言 时间：
2019-09-09 19:24:44
阅读次数：
160
12306模拟登陆 超级鹰 什么是超级鹰？ 就是和云打码类似的验证码识别网站，但是他能识别更复杂的图片验证码 模拟登陆12306 主要思路 1.首先登陆到12306界面 2.点击账号密码登录，到账号密码登录模块 3.截取整张界面的图片保存到本地，并获取验证码部分的坐标 4.在界面截图的基础上，根据获 ...
分类：
其他好文 时间：
2019-09-08 22:01:32
阅读次数：
161
爬虫串讲 requests 一定要掌握 爬取数据流程: 1. 指定url 2. 发起请求 3. 获取响应数据 4. 数据解析 5. 持久化存储 get,post参数: url data/params headers proxies 处理ajax动态加载的数据: 动态加载的数据: 通过另一个请求请求到 ...
分类：
其他好文 时间：
2019-09-05 18:20:09
阅读次数：
89
一、126,163邮箱模拟登陆 1 # -*- coding:utf-8 -*- 2 import time 3 from selenium import webdriver 4 def login126_or_163emall(url): 5 login_name = input("请输入账号：" ...
分类：
其他好文 时间：
2019-08-10 19:22:04
阅读次数：
81
如果在执行后端代码的时候，用户的访问不能满足你规定的要求的时候，你还想给用户一个反馈，这里就可以使用abort函数，立即终止视图函数的执行，并返回给前端特定的信息 例如这里我们模拟，用户访问首页的时候，需要先登录，跳转到登录页面后，模拟用户输入的请求是错误，我们返回给他401的状态(禁止访问) ...
分类：
其他好文 时间：
2019-07-23 09:35:08
阅读次数：
98
当林萧学会了模拟HTTP请求以后，原本以为自己已经完全hold住了整个需求，结果还没高兴多久，林萧就又遇到了问题。 网站在用户没登录的时候，是获取不到题目的，这尼玛怎么办？ 如果是一个经验丰富的程序员，很容易想到只需要模拟登陆一下就可以了，毕竟这些网站的登录还没有验证码一说。 但是林萧却不知道，模拟 ...
分类：
其他好文 时间：
2019-07-16 00:26:22
阅读次数：
103
selenium 模拟登陆豆瓣，爬去武林外传的短评： 在最开始写爬虫的时候，抓取豆瓣评论，我们从F12里面是可以直接发现接口的，但是最近豆瓣更新，数据是JS异步加载的，所以没有找到合适的方法爬去，于是采用了selenium来模拟浏览器爬取。 豆瓣登陆也是改了样式，我们可以发现登陆页面是在另一个fra ...
分类：
其他好文 时间：
2019-06-09 12:57:30
阅读次数：
86
