# -*- coding:utf -8 -*-import urllib2import redef getlist(): html = urllib2.urlopen("http://www.quanshu.net/book/0/269/").read() reg = re.compile(r'<l ...
分类：
Web程序 时间：
2016-10-29 16:34:38
阅读次数：
322
简单爬虫直接diy， 复杂的用scrapy ...
分类：
编程语言 时间：
2016-10-27 10:21:07
阅读次数：
166
#Python爬取网页的三种方法之一:使用urllib或者urllib2模块的getparam方法importurllibfopen1=urllib.urlopen(‘http://www.baidu.com‘).info()fopen2=urllib2.urlopen(‘http://www.sina.com‘).info()printfopen1.getparam(‘charset‘)printfopen2.getparam(‘charset‘)#----有些..
分类：
编程语言 时间：
2016-10-22 01:09:26
阅读次数：
693
Python的urllib2是一个可以用来获取URLs的函数库. urllib2为我们提供了一个很基础的函数: urlopen, 来帮助我们通过给定的URL来获取网页数据(网页源代码) 读取的部分内容如下图所示: 再看下面的代码, 得到的结果和上面是相同的. HTTP基于请求-应答的机制. 由主机发 ...
分类：
Web程序 时间：
2016-10-17 11:17:44
阅读次数：
122
Python 网络爬虫简单分析 我们下面开始分析代码 这里我们利用的是urllib2库中的urlopen方法，这里可以知道这是一个http协议的网址，urlopen一般接受三个参数，它的参数如下： 第一个参数url即为URL，第二个参数data是访问URL时要传送的数据，第三个timeout是设置超 ...
分类：
编程语言 时间：
2016-10-09 13:01:56
阅读次数：
105
今天写一下基础教程里面的第二个项目，主要使用python来做一个pdf的图，比较简单。 首先我们需要安装用到的模块pip install reportlab即可。 书上是用urlopen从往上下了一个txt文件，然后打开处理一下得到数据，因为我从这个url路径没有获取到数据，所以直接写了一点数据在程 ...
分类：
编程语言 时间：
2016-09-25 20:32:00
阅读次数：
154
报错:import urllib.request ImportError: No module named request 解决办法； 原因查询源码 (python3.5.2) ，urllib moudle中并没有request相关方法,直接是urlopen方法 ...
分类：
编程语言 时间：
2016-09-10 19:09:11
阅读次数：
1569
其中用 用urllib.request 中的urlopen打开百度（一定要加http，用read方法读取html代码，用 utf—8 解码。 其中，response对象有一个getcode()方法，可以得到HTTP状态码（200为成功 其中baidu能够正常访问，google访问超时，其中传入的三个 ...
分类：
编程语言 时间：
2016-09-09 14:55:08
阅读次数：
145
1.urllib urllib是Python标准库的一部分,包含urllib.request,urllib.error,urllib.parse,urlli.robotparser四个子模块。 （1）urllib.request用法 1）urlopen函数：用于打开一个URL(urlopen返回一个 ...
分类：
编程语言 时间：
2016-09-01 00:01:52
阅读次数：
227
【urllib.request】 1、urlopen结果保存在内存。 2、ulrretrieve结果保存到文件。 3、response有read方法。 4、可以创建Request对象。 5、发送Post数据，需要encode()成ascii的byte. 6、url中加入query 7、加入User- ...
分类：
Web程序 时间：
2016-08-22 22:58:18
阅读次数：
503
