码迷,mamicode.com
首页 >  
搜索关键字:urllib2    ( 900个结果
在python获取网页的代码中添加头信息模拟浏览器
方法1:使用build_opener()来添加 import urllib2 url = "https://www.baidu.com" headers = ("User-Agent","Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 ...
分类:编程语言   时间:2019-11-17 14:36:36    阅读次数:100
爬虫urllib2库的基本使用
所谓网页抓取,就是把URL地址中指定的网络资源从网络流中读取出来,保存到本地。 在Python中有很多库可以用来抓取网页,urllib2库基本使用。 urllib2 是 Python2.7 自带的模块(不需要下载,导入即可使用) urllib2 官方文档:https://docs.python.or ...
分类:Web程序   时间:2019-11-17 10:21:49    阅读次数:104
执行buildman --fetch-arch arm提示"urllib2.URLError: <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:581)>"如何处理?
答: 在uboot源码的tools/buildman/toolchain.py中取消证书验证,修改内容如下: ...
分类:Web程序   时间:2019-11-07 12:56:11    阅读次数:160
python_接口
一、urllib模块 urllib模块是一个标准模块,直接import urllib即可,在python3里面只有urllib模块,在python2里面有urllib模块和urllib2模块。 urllib模块太麻烦了,传参数的话,都得是bytes类型,返回数据也是bytes类型,还得解码,想直接把 ...
分类:编程语言   时间:2019-11-07 09:40:07    阅读次数:86
记录python2.7迁移到python3.6过程中的一些代码差异
| python2.7 | python 3.6 | | | | | import?urllib2 | import?urllib | | import urlparse | import urllib | | import?exceptions | 废弃 | | urllib2.urlopen | ...
分类:编程语言   时间:2019-10-31 18:36:37    阅读次数:106
让http服务人类(python之requests做接口测试)
让http服务人类 最优雅的http请求库(python的http请求库有很多,比如urllib2,urllib3,httplib)。 requests库简介 requests库是基于urllib3库封装的第三方http请求库,在python中requests应用最广泛的应该属网络爬虫方面,对于测试 ...
分类:编程语言   时间:2019-10-09 23:51:55    阅读次数:124
python爬虫(四)_urllib2:handle处理器和自定义opener
opener和handleer 使用相关的Handler处理器来创建特定功能的处理器对象; 然后通过urllib2.build_opener()方法来使用这些处理器对象,创建自定义opener对象; 使用自定义的opener对象,调用open()方法来发送请求。 简单的自定义opener() 这种方 ...
分类:编程语言   时间:2019-09-23 00:12:59    阅读次数:126
Python爬虫(三)_urllib2:get和post请求
urllib.urlencode() urllib和urllib2都是接受URL请求的相关参数,但是提供了不同的功能。两个最显著的不同如下: urllib仅可以接受URL,不能创建设置了headers的Request类实例; 但是urllib提供了urlencode方法用来GET查询字符串的产生,而 ...
分类:编程语言   时间:2019-09-22 23:57:53    阅读次数:199
python爬虫(五)_urllib2:urlerror和httperror
urllib2的异常错误处理 在我们用urlopen或opener.open方法发出一个请求时,如果urlopen或opener.open不能处理这个response,就产生错误。 这里主要说的是URLError和HTTPError,以及对它们的错误处理。 URLError URLError产生的原 ...
分类:编程语言   时间:2019-09-22 23:54:46    阅读次数:174
Python爬虫(二)_urllib2的使用
所谓网页抓取,就是把URL地址中指定的网络资源从网络流中读取出来,保存到本地。在Python中有很多库可以用来抓取网页,我们先学习urllib2。 urllib2是Python2.x自带的模块(不需要下载,导入即可使用) urllib2官网文档:https://docs.python.org/2/l ...
分类:编程语言   时间:2019-09-22 23:48:55    阅读次数:113
900条   上一页 1 2 3 4 5 ... 90 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!