urilib是python的标准库，当我们使用Python爬取网页数据时，往往用的是urllib模块，通过调用urllib模块的urlopen(url)方法返回网页对象，并使用read()方法获得url的html内容，然后使用BeautifulSoup抓取某个标签内容，结合正则表达式过滤。但是，用u ...
分类：
Web程序 时间：
2018-05-27 16:20:49
阅读次数：
276
1 URL含义 URL的格式由三部分组成： ①第一部分是协议(或称为服务方式)。 ②第二部分是存有该资源的主机IP地址(有时也包括端口号)。 ③第三部分是主机资源的具体地址，如目录和文件名等。 2 分析扒网页的方法 首先调用的是urllib2库里面的urlopen方法，传入一个URL，这个网址是百度 ...
分类：
其他好文 时间：
2018-05-26 22:19:50
阅读次数：
148
python 3中urlretrieve方法直接将远程数据下载到本地.为什么不行？ 55 import re import urllib.request def getHtml(url): page = urllib.request.urlopen(url) html = page.read() r ...
分类：
编程语言 时间：
2018-05-26 00:02:51
阅读次数：
255
将豆列导出为 Markdown 文件。<! more ...
分类：
编程语言 时间：
2018-05-25 13:47:56
阅读次数：
223
1.基本方法 urllib.request.urlopen(url, data=None, [timeout, ]*, cafile=None, capath=None, cadefault=False, context=None) - url: 需要打开的网址 - data：Post提交的数据 - ...
分类：
Web程序 时间：
2018-05-22 00:49:40
阅读次数：
284
1.python-3.6.1.exe 1）安装时选择add to path 和 for all user 2）安装32位是出于兼容更多开发库的考虑 2.验证 1）cmd python 2）from urllib.request import urlopen 无报错说明安装成功 3.安装beautif ...
分类：
编程语言 时间：
2018-05-20 18:17:17
阅读次数：
164
urllib.request urllib当中使用最多的模块,涉及请求，响应，浏览器模拟，代理，cookie等功能。 1. 快速请求 urlopen返回对象提供一些基本方法： read 返回文本数据 info 服务器返回的头信息 getcode 状态码 geturl 请求的url 2.模拟PC浏览器 ...
分类：
编程语言 时间：
2018-05-20 16:46:15
阅读次数：
260
网络编程 from urllib import request,parseurl = 'http://www.nnzhp.cn'req = request.urlopen(url) #打开一个url,发get请求content = req.read().decode() #获取返回结果fw = op ...
分类：
编程语言 时间：
2018-05-19 00:13:18
阅读次数：
202
from urllib import request,parseurl='http://www.xxx.cn'req=request.urlopen(url) #打开一个url,发get请求content=req.read().decode()fw=open('baidu.html','w',enc ...
分类：
其他好文 时间：
2018-05-18 13:51:33
阅读次数：
122
import reimport urllib.requeststring='<div class="name">(.*?)</div>'huo=urllib.request.urlopen("https://read.douban.com/provider/all").read()huo=huo.d ...
分类：
编程语言 时间：
2018-05-17 19:56:26
阅读次数：
215
