注:urllib2模块在Python 3 中被拆分成了urllib.request和urllib.error. 当你将你的代码转换到 Python 3 时,2to3工具能够自动地帮助你调整导入的模块urllib2模块定义了在复杂的世界中帮助你打开 URL (大部分是 HTTP )的函数和类 - 包括...
分类：
Web程序 时间：
2014-10-31 13:21:13
阅读次数：
328
突然想搞个这样的工具，写来写去都不知道在干嘛了，本来两个文件，现在整合在一起了。乱得不行，懒得整理了，能用就行。下载部分用了多线程，但是下载一个文件还是用的单线程，也就是没管http头的range问题。貌似速度也不咋地。开始遇到的一个问题是直接用urllib的urlretrieve或者是先urlop...
分类：
编程语言 时间：
2014-10-29 23:46:24
阅读次数：
271
3.0版本中已经将urllib2、urlparse、和robotparser并入了urllib中，并且修改urllib模块，其中包含5个子模块，即是help()中看到的那五个名字。Python2中的urllib模块，在Python3中被修改为20.5. urllib.request — Extens...
分类：
编程语言 时间：
2014-10-29 12:47:18
阅读次数：
373
#-*-coding:-utf-8importurllib#url='http://iplaypython.com/'#url1=urllib.urlopen(url)#打开url地址,urlopen(url,data=None,proxies=None)#printurl1.read()#读取re...
分类：
编程语言 时间：
2014-10-29 01:56:32
阅读次数：
323
最近在学python，之前用Python写过简单的图片爬取，今天想着用python爬一下豆瓣的电影，就有了下面的程序：
#coding:utf-8
import re
import sys
import urllib
from bs4 import BeautifulSoup
def movieSearch():
douBanSearchurl = "http://movie.douban.c...
分类：
其他好文 时间：
2014-10-29 00:26:07
阅读次数：
254
第3关 ORZ，又是源代码。开启正则表达式。from urllib import *from urllib.request import *import reres = urlopen('http://www.pythonchallenge.com/pc/def/equality.html')li....
分类：
编程语言 时间：
2014-10-26 19:33:43
阅读次数：
215
接入流程如下，需要先注册开发者帐号，之后会得到一个32位的key，保存下来，用于以后发送数据。http://www.tuling123.com/
请求方式
示例：
# -*- coding: utf-8 -*-
import urllib
import json
def getHtml(url):
page = urllib.urlo...
分类：
编程语言 时间：
2014-10-26 18:29:28
阅读次数：
332
引用文章1：http://my.oschina.net/u/558071/blog/144792引用文章2：http://zhuoqiang.me/python-urllib2-usage.html#proxy在python中，urllib2并不是urllib的升级版，urllib和urllib2不...
分类：
编程语言 时间：
2014-10-24 10:29:14
阅读次数：
175
一，利用网络爬虫来下载韩寒博客文章，主要需要用到以下知识要点：1，简要了解HTML标记语言，熟悉HTTP协议，发现HTML规律2，熟悉urllib模块3，熟悉python在此我利用的是ie8的开发者工具，当然也可以使用比较出名的firebug，这是火狐的一个插件，十分好用。中心思想：获取URL链..
分类：
编程语言 时间：
2014-10-23 06:57:58
阅读次数：
333
用给自己记录用defmonitor_work_1(content):dict_1={‘service‘:‘rdc_monitor‘,‘checkpoint‘:‘rdc_monitor_log‘,‘title‘:content,‘content‘:content,‘cluster‘:‘public‘,‘grade‘:‘2‘}params=urllib.urlencode(dict_1)urllib.urlopen(‘http://alert.sae.sina.com.cn/new/‘,params)
分类：
Web程序 时间：
2014-10-21 19:49:41
阅读次数：
168
