1. postman和jmeter上手容易，但是不够灵活。所以使用python来进行接口测试。 2. python基础的http库有 urllib，httplib2 等，推荐使用request库来警醒接口测试，是urrllib的升级版本 安装步骤： 1. 安装python，配置python环境。 安 ...
分类：
编程语言 时间：
2020-05-02 18:35:24
阅读次数：
83
百度贴吧爬虫实现 GET请求 from urllib import request import urllib import time # https://tieba.baidu.com/f?kw=python&fr=ala0&tpl=5 #第一页 # https://tieba.baidu.com ...
分类：
编程语言 时间：
2020-04-30 17:27:20
阅读次数：
97
import json, urllibimport urllib.requestfrom urllib.parse import urlencodedef main(): # 配置您申请的APPKey appkey = "3acd93b81aa4cec158184f53b8629e9e" # 1.根 ...
分类：
其他好文 时间：
2020-04-30 11:36:08
阅读次数：
59
import urllib.request # r=urllib.request.urlopen("http://183.247.167.54:7009/#/map") # print(r.read())#爬取网页源码 r=urllib.request.urlopen("http://183.247 ...
分类：
Web程序 时间：
2020-04-29 18:02:09
阅读次数：
66
爬虫相关随笔 爬虫开发之get和post请求 selenium alert JS弹窗问题处理 Selenium爬取元素定位 爬虫开发13.UA池和代理池在scrapy中的应用 爬虫开发14.scrapy框架之分布式操作 爬虫开发12.selenium在scrapy中的应用 爬虫开发11.scrapy ...
分类：
其他好文 时间：
2020-04-29 10:50:03
阅读次数：
47
import re import requests from urllib import error from bs4 import BeautifulSoup import os num = 0 numPicture = 0 file = '' List = [] def Find(url): g ...
分类：
编程语言 时间：
2020-04-29 10:25:30
阅读次数：
91
无需参数直接请求单个页面 import urllib from urllib.request import request from urllib.urlopen import urlopen # import urllib2 import requests # 使用 urllib 方式获取 res ...
分类：
编程语言 时间：
2020-04-28 22:52:43
阅读次数：
47
简述：使用代理服务器发送请求，隐藏自己的真是ip... request = Request(url, headers=headers) 1. 使用urllib.request下的ProxyHandler模块，来加载代理ip，生成对象 2. 使用urllib.request下的build_opener ...
分类：
其他好文 时间：
2020-04-28 15:07:27
阅读次数：
102
目标：拷贝贴吧前几页HTML并保存到本地.html文件中 步骤： 1. 创建动态可变化的url,用来循环访问不同页面。（a. args={'key': 'value'}， 来自定义url中的动态参数；b. 使用urllib.parse下的urlencode模块来对动态参数进行转码,防止中文报错） 2 ...
分类：
其他好文 时间：
2020-04-27 11:40:04
阅读次数：
74
使用requests库，urllib库，构建简单爬虫代码。（GET、POST请求） ...
分类：
其他好文 时间：
2020-04-26 19:21:08
阅读次数：
56
