准备工作: 1:下载安装Charles,下载安装火狐浏览器。因为工作需要常用的浏览器有多个,chrome已经安装的插件比较多,如果需要抓chrome需要安装,所以用Firefox 2:注册Charles,否则会30min弹框提示要重启一次 1> 获取注册码,地址:https://www.charle ...
分类:
其他好文 时间:
2020-07-30 14:46:05
阅读次数:
118
from selenium import webdriver options = webdriver.ChromeOptions() options.add_argument("--auto-open-devtools-for-tabs") driver = webdriver.Chrome(chr ...
分类:
编程语言 时间:
2020-07-30 14:26:27
阅读次数:
110
from selenium import webdriver import time driver=webdriver.Chrome() driver.get("http://www.baidu.com/") #截屏 time.sleep(3) #获取网页源代码 a=driver.page_sour ...
分类:
Web程序 时间:
2020-07-30 01:25:41
阅读次数:
89
from selenium import webdriver import time driver=webdriver.Chrome() driver.get("http://www.douban.com/") time.sleep(2) driver.execute_script('window. ...
分类:
Web程序 时间:
2020-07-30 01:21:31
阅读次数:
95
from selenium import webdriver import time driver=webdriver.Chrome() driver.get("http://www.douban.com/") driver.find_element_by_xpath('//*[@id="anony ...
分类:
Web程序 时间:
2020-07-30 01:19:09
阅读次数:
86
具体代码如下: import requests import re headers = {'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74. ...
分类:
其他好文 时间:
2020-07-29 21:39:19
阅读次数:
106
1. 安装chrome 1.1 添加repo源 sudo vi /etc/yum.repos.d/google.repo 在打开的空文件中填入以下内容 [google] name=Google-x86_64 baseurl=http://dl.google.com/linux/rpm/stable/ ...
分类:
系统相关 时间:
2020-07-29 17:41:49
阅读次数:
79
1 url="https://www.baidu.com" 2 driver = webdriver.Chrome() 3 driver.get(url) 4 xpath="" #Select元素的Xpath串 5 ele_sel = driver.find_element_by_xpath(xpa ...
分类:
其他好文 时间:
2020-07-28 16:59:46
阅读次数:
162
图片的复制无非有两种方法,一种是图片直接上传到服务器,另外一种转换成二进制流的base64码目前限chrome浏览器使用首先以um-editor的二进制流保存为例:打开umeditor.js,找到UM.plugins['autoupload'],然后找到autoUploadHandler方法,注释掉 ...
分类:
Web程序 时间:
2020-07-28 14:45:38
阅读次数:
143
import requests #UA伪装: #UA:User-Agent(请求载体的身份标识)检测: #门户网站的服务器会检测对应请求的身份载体标识,如果检测到请求的载体身份标识为某一款浏览器 #说明该请求是一个正常的请求,但是,如果检测到请求的载体身份标识不是某一款浏览器的,则表示该请求不是正常 ...
分类:
Web程序 时间:
2020-07-28 10:17:22
阅读次数:
79