import reimport requestsimport json,osfrom urllib import requestdef get_detail(url,title): headers = { 'User-Agent':'Mozilla/5.0 (Windows NTr 6.1; WOW ...
分类:
其他好文 时间:
2018-08-17 00:40:09
阅读次数:
233
# 头条街拍图片爬取 1 import re 2 import requests 3 from urllib import request 4 import json 5 import os 6 i = 0 7 headers = { 8 'user-agent': 'Mozilla/5.0 (Wi... ...
分类:
编程语言 时间:
2018-08-17 00:34:56
阅读次数:
202
import requestsimport reimport jsonimport osfrom urllib import requestfor i in range(0,60,20): url = 'https://www.toutiao.com/search_content/?offset={ ...
分类:
其他好文 时间:
2018-08-16 23:43:18
阅读次数:
1485
Requests 是Python语编写,基于urllib,采Apache2 Licensed开源协议的 HTTP 库。它urllib 更加方便,可以节约我们大量的工作,完全满足HTTP测试需求。 一句话——requests是python实现的简单易用的HTTP库 二、安装Requests库 进入命令 ...
分类:
编程语言 时间:
2018-08-16 13:37:14
阅读次数:
238
import requests import json # 1. url url = 'http://fanyi.baidu.com/sug' # 2. form/ data/ body def translate(kw): form = { 'kw': kw } # request 的post方法... ...
分类:
Web程序 时间:
2018-08-16 00:56:07
阅读次数:
165
from urllib import request, parsefrom urllib.error import HTTPError, URLError# 保存cookiefrom http import cookiejarclass session(object): def __init__(s ...
分类:
其他好文 时间:
2018-08-14 23:28:53
阅读次数:
200
from urllib import request, parsefrom urllib.error import HTTPError,URLError#保存cookiefrom http import cookiejarclass session(object): def __init__(sel ...
分类:
其他好文 时间:
2018-08-14 22:47:46
阅读次数:
175
Requests urllib的升级版本打包了全部功能并简化了使用方法 beautifulsoup 是一个可以从HTML或XML文件中提取数据的Python库. LXML 一个HTML解析包 用于辅助beautifulsoup解析网页 urllib2用一个Request对象来映射你提出的HTTP请求 ...
分类:
编程语言 时间:
2018-08-14 19:52:20
阅读次数:
175
最近需要将一些python代码转成java,遇到url编码 urllib.quote(str,safe='/') 但java中URLEncoder.encode(arg, Constant.UTF_8)会将'/'转成%2F 网上查了一下 java没见到类似的safe方式,只好自己实现一个类 验证下 ...
分类:
编程语言 时间:
2018-08-14 18:57:05
阅读次数:
1195
urllib.request模块是python3针对处理url的。 1. 首先导入: from urllib import request 2. 构造url,构造url的headers信息和传参【request.Request】 不带参数的get请求【略】 带参数的get请求【带header,带da ...
分类:
编程语言 时间:
2018-08-14 14:41:27
阅读次数:
162