说明： 1. 导入三个模块，urllib.request.urlopen用来打开url链接，urllib.parse的urlencode方法将浏览器network里的data对象转为urlopen的第二个参数data，json.loads()方法把response.read返回的字符串转为json格 ...
分类：
编程语言 时间：
2017-03-05 12:38:05
阅读次数：
187
Python爬虫学习系列教程 Python爬虫学习系列教程 大家好哈，我呢最近在学习Python爬虫，感觉非常有意思，真的让生活可以方便很多。学习过程中我把一些学习的笔记总结下来，还记录了一些自己实际写的一些小爬虫，在这里跟大家一同分享，希望对Python爬虫感兴趣的童鞋有帮助，如果有机会期待与大家 ...
分类：
编程语言 时间：
2017-03-01 20:47:38
阅读次数：
202
#coding=utf-8 import urllib2 import os import re count=0#计数君 for line in open("./imagenet1.synset.geturls"): imagename=str(count+1) print(imagename) t... ...
分类：
编程语言 时间：
2017-03-01 19:42:10
阅读次数：
254
# coding=utf-8 import urllib.request import re url = 'http://www.163.com' file = 'd:/test.html' data = urllib.request.urlopen(url).read() r1 = re.comp ...
分类：
编程语言 时间：
2017-02-26 17:49:00
阅读次数：
251
http://127.0.0.1:5000/list1/a+b/ Separator: + [u'a', u'b'] http://127.0.0.1:5000/list2/a|b/ Separator: | [u'a', u'b'] 自定义转换器需要集成BaseConverter，实现to_pyt ...
分类：
Web程序 时间：
2017-02-26 16:44:15
阅读次数：
481
python版本：3.0 使用库： import urllib.request #打开网页的库 import os #创建文件夹有关 程序作用：批量爬取煎蛋网上图片 视频链接：链接：http://pan.baidu.com/s/1mhLBwWo 密码：1n51 有一点与视频不同：视频中图片链接为ht ...
分类：
其他好文 时间：
2017-02-25 12:31:59
阅读次数：
179
urllib提供了一系列用于操作URL的功能。 Get urllib的request模块可以非常方便地抓取URL内容，也就是发送一个GET请求到指定的页面，然后返回HTTP的响应： 例如，对豆瓣的一个URLhttps://api.douban.com/v2/book/2129650进行抓取，并返回响 ...
分类：
Web程序 时间：
2017-02-24 21:02:30
阅读次数：
463
urllib.urlencode() 无法encode中文, UnicodeEncodeError, 具体错误内容如下:File "/System/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/urllib.py", l ...
分类：
Web程序 时间：
2017-02-24 15:43:10
阅读次数：
239
importurllib
data=urllib.parse.urlencode(params).encode(‘utf-8‘)
req=urllib.request.Request(url,data)
req.add_header(‘Content-Type‘,"application/x-www-form-urlencoded")
response=urllib.request.urlopen(req)
the_page=response.read().decode(‘utf-8‘)
print(the_..
分类：
编程语言 时间：
2017-02-23 23:03:48
阅读次数：
242
requests是python的一个HTTP客户端库，跟urllib，urllib2类似，那为什么要用requests而不用urllib2呢？官方文档中是这样说明的：python的标准库urllib2提供了大部分需要的HTTP功能，但是API太逆天了，一个简单的功能就需要一大堆代码。我也看了下requests的文档，确实很简单，..
分类：
编程语言 时间：
2017-02-22 15:35:08
阅读次数：
258
