在Python中，我们通常使用urllib2中提供的工具来完成HTTP请求，例如向服务器POST数据。通常情况下，所有的数据都会进行URL编码并将Content-Type设置为application/x-www-form-urlencoded。不过在一些特殊的情况下（例如服务器限制而不允许使用这种类 ...
分类：
编程语言 时间：
2017-06-26 00:36:49
阅读次数：
1023
requests是Python的一个HTTP客户端库，跟urllib，urllib2差不多，那我们为什么要用requests呢？采用官方的说是：python的标准库urllib2提供了大部分需要的HTTP功能，但是API太逆天了，一个简单的功能就需要一大堆代码。 下面是requests的安装步骤： ...
分类：
编程语言 时间：
2017-06-22 18:32:08
阅读次数：
225
Cookie，指某些网站为了辨别用户身份、进行session跟踪而储存在用户本地终端上的数据（通常经过加密） 比如说有些网站需要登录后才能访问某个页面，在登录之前，你想抓取某个页面内容是不允许的。那么我们可以利用Urllib2库保存我们登录的Cookie，然后再抓取其他页面就达到目的了。 在此之前呢 ...
分类：
编程语言 时间：
2017-06-21 15:03:45
阅读次数：
212
1、图片地址为下载地址访问图片地址可直接下载的 #!/usr/bin/env python # -*- coding: utf-8 -*- import urllib2 import json import requests import os import sys from time import ...
分类：
编程语言 时间：
2017-06-21 11:25:11
阅读次数：
106
一、正则表达式提取网页内容解析效率：正则表达式>lxml>beautifulsoup代码：import
reimport
urllib2urllist
=‘http://example.webscraping.com/places/default/view/United-Kingdom-239‘html=
urllib2.urlopen(urllist).read()num=
re.findall(‘<tdclass="w2p_fw">..
分类：
编程语言 时间：
2017-06-19 22:10:20
阅读次数：
441
第一次用python编写程序 是照着视频里编写的 但是期间也出现了很多错误 视频内用了是Python2 版本的 而我的是python 3版本的 写这两程序时就发现有很多不同 首先 python3没有urllib2这个组件 现在是urllib.request 所以在文件前面引入 import urll ...
分类：
编程语言 时间：
2017-06-19 19:43:40
阅读次数：
158
原文：http://blog.csdn.net/boksic/article/details/16870453 import urllib2 import timeit import thread import time i = 0 x = 0 mylock = thread.allocate_lo ...
分类：
编程语言 时间：
2017-06-19 12:58:25
阅读次数：
180
先啰嗦一句，我使用的版本是python2.7，没有使用3.X的原因是我觉得2.7的扩展比较多，且较之前的版本变化不大，使用顺手。3.X简直就是革命性的变化，用的蹩手。3.x的版本urllib与urllib2已经合并为一个urllib库，学着比较清晰些，2.7的版本呢urllib与urllib2各有各 ...
分类：
Web程序 时间：
2017-06-17 14:21:55
阅读次数：
295
python3对urllib和urllib2进行了重构主要拆分成了：1、urllib.request 1、urllib.request.Request(url, data=None, headers={}, method=None) 用来包装头部的数据： User-Agent ：这个头部可以携带如下 ...
分类：
编程语言 时间：
2017-06-17 10:16:51
阅读次数：
180
#-*-coding:utf-8-*- import urllib import urllib2 import cookielib ##urllib url="http://www.qq.com" header={"User-Agent":"Mozilla/5.0 (Windows NT 6.1; ...
分类：
Web程序 时间：
2017-06-16 16:46:59
阅读次数：
206
