简介：urllib2是python的一个获取url（Uniform Resource Locators，统一资源定址器）的模块。它用urlopen函数的形式提供了一个非常简洁的接口。这使得用各种各样的协议获取url成为可能。它同时 也提供了一个稍微复杂的接口来处理常见的状况-如基本的认证，cooki...
分类：
编程语言 时间：
2014-10-13 18:29:17
阅读次数：
185
import sys,urllib,urllib2,getpass#定义TerminalPwd类扩展HTTPPasswordMgr，允许在需要的时候询问操作员输入密码class TerminalPwd(urllib2.HTTPPasswordMgr): def find_user_passwo...
分类：
编程语言 时间：
2014-10-12 20:24:08
阅读次数：
217
一直以来技术群里会有新入行的同学提问关于urllib和urllib2以及cookielib相关的问题。所以我打算在这里总结一下，避免大家反复回答同样的问题浪费资源。这篇属于教程类的文字，如果你已经非常了解urllib2和cookielib那么请忽略本篇。首先从一段代码开始，#cookieimport...
分类：
编程语言 时间：
2014-10-11 13:53:15
阅读次数：
255
说明：程序使用http://s.tool.chinaz.com/same此网站查询的结果，使用python简单的实现抓取结果
先随便查询一个结果，抓包分析，如图：
使用python模仿post表单，使用正则表达式匹配结果
代码如下：
# -*- coding: utf-8 -*-
import urllib
import urllib2
import re
import ...
分类：
编程语言 时间：
2014-10-11 04:15:34
阅读次数：
249
1、Proxy 的设置urllib2 默认会使用环境变量 http_proxy 来设置 HTTP Proxy。如果想在程序中明确控制 Proxy，而不受环境变量的影响，可以使用下面的方式import urllib2enable_proxy = Trueproxy_handler = urllib2....
分类：
编程语言 时间：
2014-10-11 01:10:44
阅读次数：
259
1.[代码]最基本的抓站 ?12import urllib2content = urllib2.urlopen('http://XXXX').read()2.[代码]使用代理服务器 ?12345import urllib2proxy_support = urllib2.ProxyHandler({'...
分类：
编程语言 时间：
2014-10-10 19:32:24
阅读次数：
226
ctrl+`importurllib2,os;pf=‘Package
Control.sublime-package‘;ipp=sublime.installed_packages_path();os.makedirs(ipp)
ifnotos.path.exists(ipp)else
None;open(os.path.join(ipp,pf),‘wb‘).write(urllib2.urlopen(‘http://sublime.wbond.net/‘+pf.replace(‘
‘,‘%20‘)).rea..
分类：
其他好文 时间：
2014-10-09 16:40:58
阅读次数：
222
Python 中urllib2.urlopen 中存在中文转码问题，解决方法如下：1.import BeautifulSoupimport chardetresponse =urllib2.urlopen('%s'%line) #response.decode('utf-8')...
分类：
编程语言 时间：
2014-10-08 14:44:45
阅读次数：
176
python下读取一个页面的数据可以通过urllib2轻松实现请求import urllib2print urllib2.urlopen('http://www.baidu.com').read()涉及到页面的POST请求操作的话需要提供头信息，提交的post数据和请求页面。其中的post数据需要u...
分类：
编程语言 时间：
2014-10-05 05:27:27
阅读次数：
201
先啰嗦一句，我使用的版本是python2.7，没有使用3.X的原因是我觉 得2.7的扩展比较多，且较之前的版本变化不大，使用顺手。3.X简直就是革命性的变化，用的蹩手。3.x的版本urllib与urllib2已经合并为 一个urllib库，学着比较清晰些，2.7的版本呢urllib与urllib2各...
分类：
其他好文 时间：
2014-10-04 17:13:07
阅读次数：
211
