from urllib import requestimport gevent,timefrom gevent import monkeymonkey.patch_all() def f(url): print('GET: %s' % url) resp = request.urlopen(url) ...
分类:
编程语言 时间:
2017-10-29 17:44:13
阅读次数:
220
Requests Python标准库中提供了:urllib、urllib2、httplib等模块以供Http请求,但是,它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务。 Requests 是使用 Apache2 License ...
分类:
其他好文 时间:
2017-10-29 11:07:52
阅读次数:
363
import datetime,requests import json,time,urllib import hashlib import datetime,requests import json,time,urllib import hashlib import datetime,reques ...
分类:
编程语言 时间:
2017-10-27 16:04:36
阅读次数:
279
urlopen 里面可以传递四个参数 urllib.urlopen(url[, data[, proxies[, context]]]) url 链接 data 传参 数据传送分为POST和GET两种方式,两种方式有什么区别呢? 最重要的区别是GET方式是直接以链接形式访问,链接中包含了所有的参数, ...
分类:
Web程序 时间:
2017-10-26 19:53:38
阅读次数:
192
先来看个栗子: 下面来看一下I/O秘籍型的线程,举个栗子——爬虫,下面是爬下来的图片用4个线程去写文件 1 #!/usr/bin/env python 2 # -*- coding:utf-8 -*- 3 4 import re 5 import urllib 6 import threading ...
分类:
编程语言 时间:
2017-10-26 11:40:41
阅读次数:
254
request 模块 #requests 库#python标准库中提供了: urllib等模块以供http请求,但是,它的api太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务。 # /usb/bin/env python#! -*- enc ...
分类:
其他好文 时间:
2017-10-25 21:31:48
阅读次数:
214
0.常见方法or函数: 1.urllencode()将字符串等转换为URL.(from urllib.parse import urlencode) 2.编码:json.dumps().把一个Pyhton对象编码转换成Json字符串. 解码:json.loads().把json格式字符串解码成Pyt ...
分类:
编程语言 时间:
2017-10-25 15:56:26
阅读次数:
281
1.获取url参数 urlparse 返回的结果 2.url 编码 quote 3.url 解码 unquote ...
分类:
编程语言 时间:
2017-10-24 13:15:42
阅读次数:
171
re.compile() 可以把正则表达式编译成一个正则表达式对象. re.findall() 方法读取html 中包含 imgre(正则表达式)的数据。 这里的核心是用到了urllib.urlretrieve()方法,直接将远程数据下载到本地。 ...
分类:
其他好文 时间:
2017-10-23 18:21:25
阅读次数:
127
1 基本使用: 2 增加请求头: 3 url编码: 4.post请求--静态: 5.post请求 -- 动态(ajax加载): ...
分类:
Web程序 时间:
2017-10-22 22:17:31
阅读次数:
371