搬运自http://www.2cto.com/kf/201309/242273.html,感谢原作。之所以出现上面的异常,是因为如果用 urllib.request.urlopen 方式打开一个URL,服务器端只会收到一个单纯的对于该页面访问的请求。但是服务器并不知道发送这个请求使用的浏览器,操作系...
分类:
编程语言 时间:
2015-03-14 10:50:55
阅读次数:
170
##安装## `sudo pip install pyquery` ##例子## ``` from pyquery import PyQuery import urllib2 page = urllib2.urlopen("http://www.lzu.edu.cn") text = unicode(page.read(), "utf-8") doc = PyQuery(text) ...
分类:
Web程序 时间:
2015-03-07 14:21:17
阅读次数:
470
python urllib2模块urlopen()最常用的函数
urllib2.urlopen(url[, data[, timeout[, cafile[, capath[, cadefault[, context]]]]])
Open the URL url, which can be either a string or a Request object.
他有几个参数比较重要的...
分类:
编程语言 时间:
2015-03-04 13:01:22
阅读次数:
180
利用python3提供的urllib.request很方便爬网页上的东西。
1、urllib.request.urlopen(url)打开网页,并读取read()
2、python正则分析图片链接,如
3、urllib.request.urlretrieve(url, filename)下载相应的url图片,保存到filename
详细看代码:
# coding = utf-8
#...
分类:
编程语言 时间:
2015-03-02 01:05:13
阅读次数:
245
import urllib.requesturl="http://mm.taobao.com/json/request_top_list.htm?type=0&page=1"up=urllib.request.urlopen(url)#打开目标页面,存入变量upcont=up.read()#从up中...
分类:
编程语言 时间:
2015-02-16 10:10:29
阅读次数:
241
环境:Python2.7.9 / Sublime Text 2 / Chrome1.url访问,直接调用urllib库函数即可import urllib2url='http://www.baidu.com/'response = urllib2.urlopen(url)html=response.r...
分类:
编程语言 时间:
2015-02-14 12:16:42
阅读次数:
5893
今天是第一天记录学习博客,希望以此来激励自己每天都要学一点写一点,长此以往,观察变化。今天的主要学习内容是Google-python-class的urllibmodule。首先是urllib.urlopen()函数ufile=urllib.urlopen(‘http://www.baidu.com/‘)调用该函数产生一个类似于file类的对象,可以使..
分类:
编程语言 时间:
2015-02-13 07:02:48
阅读次数:
199
本项目剩下部分主要使用量urllib和LinePlot。
什么是urllib?
urllib模块提供的上层接口,使我们可以像读取本地文件一样读取www和ftp上的数据。
看代码:
import urllib
print urllib.urlopen('http://www.baidu.com').read()
执行效果:
重点需要注意的是urlopen函数:
关于urlo...
分类:
编程语言 时间:
2015-02-10 11:25:37
阅读次数:
306
获取天气信息#encoding:UTF-8import urllib.requestimport redef getHtml(url): page=urllib.request.urlopen(url) html=page.read() page.close() ...
分类:
编程语言 时间:
2015-01-30 19:01:45
阅读次数:
166
1 #coding:utf-8 2 import urllib2 3 import re 4 import threading 5 6 #图片下载 7 def loadImg(addr,x,y,artName): 8 data = urllib2.urlopen(addr).read()...
分类:
编程语言 时间:
2015-01-30 14:37:43
阅读次数:
150