1. 为什么需要模拟登陆？ #获取cookie，能够爬取登陆后的页面 2. 回顾： requests是如何模拟登陆的？ #1、直接携带cookies请求页面 #2、找接口发送post请求存储cookie 3. selenium是如何模拟登陆的？ #找到对应的input标签，输入文字点击登录 4. 那 ...
分类：
其他好文 时间：
2020-01-18 00:57:11
阅读次数：
87
分析 一般地，QQ空间可以通过手机QQ扫码登录和账号密码登录。但是账号密码登录有时候需要验证码，为了保证登录的成功率，我们选择扫码登录的方式。 首先，进入登录界面： https://xui.ptlogin2.qq.com/cgi-bin/xlogin?proxy_url=https://qzs.qq ...
分类：
其他好文 时间：
2020-01-17 23:31:01
阅读次数：
1764
案例一：网站模拟登录 # -*- coding:utf-8 -*- # douban.py #coding=utf-8 import time from selenium import webdriver from selenium.webdriver.common.keys import Keys ...
分类：
其他好文 时间：
2020-01-16 23:42:51
阅读次数：
120
1. 相关概念 1. selenium模块 是一个基于浏览器自动化的模块 2. 与爬虫之间的关联 便捷的捕获到动态加载到的数据（可见即可得） 实现模拟登陆 3.环境安装 pip3 install selenium 简单演示 from selenium import webdriver from ti ...
分类：
其他好文 时间：
2020-01-16 22:07:13
阅读次数：
104
模拟登录#!/bin/bashtname="admin"tpasswd="123"name=''passwd=''function login(){echo "请输入用户名:"read nameecho "请输入密码:"read passwd}function check(){ if [ ${tna ...
分类：
其他好文 时间：
2020-01-08 23:15:17
阅读次数：
82
问题：selenium模块和爬虫之间具有的关联 便捷的获取网站中动态加载的数据 便捷实现模拟登陆 什么是selenium模块 selenium是基于浏览器自动化的一个模块 selenium使用流程 安装环境：pip install selenium 下载一个浏览器的驱动程序 下载路径(谷歌)： ht ...
分类：
其他好文 时间：
2019-12-28 21:20:06
阅读次数：
91
1. Cookie 介绍 HTTP 协议是无状态的。因此，若不借助其他手段，远程的服务器就无法知道以前和客户端做了哪些通信。Cookie 就是「其他手段」之一。 Cookie 一个典型的应用场景，就是用于记录用户在网站上的登录状态。 用户登录成功后，服务器下发一个（通常是加密了的）Cookie 文件 ...
分类：
编程语言 时间：
2019-12-25 22:11:57
阅读次数：
94
import requestsimport base64import timeimport rsaimport binasciiimport urllib.parseimport re,urllibfrom bs4 import BeautifulSoupclass WeiBo(): def __i ...
分类：
其他好文 时间：
2019-12-22 00:27:08
阅读次数：
95
requests高级部分 代理 cookie 验证码的识别 模拟登陆 代理 代理概念：代理服务器。 作用：接受请求==》请求转发。 代理和爬虫之间的关联： 可以使用请求转发的机制使得目的服务器接收到的请求对应ip的一个改变。 为什么要使用代理改变请求的ip地址？ 爬虫程序在短时间内对指定的服务器发起 ...
分类：
其他好文 时间：
2019-12-16 22:43:08
阅读次数：
156
来个续：因为一些其他原因，很久没有写代码了。最近，本来想做个模拟登陆百家号的模拟登陆的程序，但是百度旋转图片验证一直没搞定，准备用selenium去完成，然后就想找个练练手的，淘宝模拟登陆的坑就踩上了。 遇到过的问题： 网上的能人异士挺多，大部分帖子也看了，不少都有小下次，好多都是过不了淘宝系统检测 ...
分类：
其他好文 时间：
2019-11-17 14:21:44
阅读次数：
149
