码迷,mamicode.com
首页 >  
搜索关键字:urllib    ( 2222个结果
Python 爬虫
from urllib import requestimport gevent,timefrom gevent import monkeymonkey.patch_all() def f(url): print('GET: %s' % url) resp = request.urlopen(url) ...
分类:编程语言   时间:2017-10-29 17:44:13    阅读次数:220
py爬虫资料
Requests Python标准库中提供了:urllib、urllib2、httplib等模块以供Http请求,但是,它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务。 Requests 是使用 Apache2 License ...
分类:其他好文   时间:2017-10-29 11:07:52    阅读次数:363
python url拼接
import datetime,requests import json,time,urllib import hashlib import datetime,requests import json,time,urllib import hashlib import datetime,reques ...
分类:编程语言   时间:2017-10-27 16:04:36    阅读次数:279
urllib 进阶
urlopen 里面可以传递四个参数 urllib.urlopen(url[, data[, proxies[, context]]]) url 链接 data 传参 数据传送分为POST和GET两种方式,两种方式有什么区别呢? 最重要的区别是GET方式是直接以链接形式访问,链接中包含了所有的参数, ...
分类:Web程序   时间:2017-10-26 19:53:38    阅读次数:192
python 多线程剖析
先来看个栗子: 下面来看一下I/O秘籍型的线程,举个栗子——爬虫,下面是爬下来的图片用4个线程去写文件 1 #!/usr/bin/env python 2 # -*- coding:utf-8 -*- 3 4 import re 5 import urllib 6 import threading ...
分类:编程语言   时间:2017-10-26 11:40:41    阅读次数:254
request & requests 模块
request 模块 #requests 库#python标准库中提供了: urllib等模块以供http请求,但是,它的api太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务。 # /usb/bin/env python#! -*- enc ...
分类:其他好文   时间:2017-10-25 21:31:48    阅读次数:214
python学习随笔
0.常见方法or函数: 1.urllencode()将字符串等转换为URL.(from urllib.parse import urlencode) 2.编码:json.dumps().把一个Pyhton对象编码转换成Json字符串. 解码:json.loads().把json格式字符串解码成Pyt ...
分类:编程语言   时间:2017-10-25 15:56:26    阅读次数:281
python3 urllib.parse 常用函数
1.获取url参数 urlparse 返回的结果 2.url 编码 quote 3.url 解码 unquote ...
分类:编程语言   时间:2017-10-24 13:15:42    阅读次数:171
爬虫代码,正则表达,下载图片
re.compile() 可以把正则表达式编译成一个正则表达式对象. re.findall() 方法读取html 中包含 imgre(正则表达式)的数据。 这里的核心是用到了urllib.urlretrieve()方法,直接将远程数据下载到本地。 ...
分类:其他好文   时间:2017-10-23 18:21:25    阅读次数:127
urllib.request--urllib2
1 基本使用: 2 增加请求头: 3 url编码: 4.post请求--静态: 5.post请求 -- 动态(ajax加载): ...
分类:Web程序   时间:2017-10-22 22:17:31    阅读次数:371
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!