在Python中涉及到URL请求相关的操作涉及到模块有urllib,urllib2,requests,其中urllib和urllib2是Python自带的HTTP访问标准库,requsets是第三方库,需要自行安装。requests是第三方库,可以想到在使用起来它可能是最方便的一个。 urllib和 ...
分类：
编程语言 时间：
2017-09-25 00:51:22
阅读次数：
231
前言： 什么是cookie? Cookie，指某些网站为了辨别用户身份、进行session跟踪而储存在用户本地终端上的数据（通常经过加密）。 比如说有些网站需要登录后才能访问某个页面，在登录之前，你想抓取某个页面内容是不允许的。那么我们可以利用Urllib库保存我们登录的Cookie，然后再抓取其他 ...
分类：
编程语言 时间：
2017-09-24 09:59:43
阅读次数：
275
直接上代码吧 打印出来是： Opera/9.80 (Macintosh; Intel Mac OS X 10.6.8; U; en) Presto/2.8.131 Version/11.11[Finished in 1.4s] ...
分类：
Web程序 时间：
2017-09-23 10:22:53
阅读次数：
263
requests.exceptions.ConnectionError: HTTPConnectionPool(host='http', port=80): Max retries exceeded with url: //hshi.58.com/zufang/pn1 (Caused by NewC... ...
分类：
其他好文 时间：
2017-09-22 11:53:44
阅读次数：
192
Requests 是用Python语言编写，基于 urllib，采用 Apache2 Licensed 开源协议的 HTTP 库。它比 urllib 更加方便，可以节约我们大量的工作，完全满足 HTTP 测试需求。Requests 的哲学是以 PEP 20 的习语为中心开发的，所以它比 urllib ...
分类：
编程语言 时间：
2017-09-21 18:10:14
阅读次数：
335
教训： 在调用request方法，实现模拟访问URL，返回状态码及响应结果时，由于自己写的某个文件命名为string.py，导致出现错误 from string import ascii_letters, digits, hexdigits ImportError: cannot import na ...
分类：
其他好文 时间：
2017-09-19 23:08:00
阅读次数：
265
python中http协议接口相关的库有urllib，urllib2以及reqeusts库，这其中reqeusts库用来起来最方便，因此我也主要采用requests库来做http协议的接口测试。首先来看下需要哪些环境信息： 一、安装python mac下自带安装了python，这个不多说了。 二、安 ...
分类：
编程语言 时间：
2017-09-19 17:58:03
阅读次数：
316
Urllib基础 urllib.request.urlretrieve(url,filenname) 直接将网页下载到本地 清理下载网页时的缓存 urllib.request.urlcleanup() info getcode() 返回状态吗 202 成功 403 禁止访问 geturl() 查询当 ...
分类：
编程语言 时间：
2017-09-18 22:23:30
阅读次数：
188
转自：http://www.cnblogs.com/kennyhr/p/4018668.html（侵权可联系本人删掉） 一直以来技术群里会有新入行的同学提问关于urllib和urllib2以及cookielib相关的问题。所以我打算在这里总结一下，避免大家反复回答同样的问题浪费资源。 这篇属于教程类 ...
分类：
编程语言 时间：
2017-09-17 18:58:48
阅读次数：
305
买了本书《精通Python网络爬虫》，看完了第6章，我感觉我好像可以干点什么；学的不多，其中的笔记我放到了GitHub上：https://github.com/NSGUF/PythonLeaning/blob/master/examle-urllib.py，因为我用的python3.0，所以，在爬取 ...
分类：
数据库 时间：
2017-09-16 19:09:37
阅读次数：
254
