码迷,mamicode.com
首页 >  
搜索关键字:urllib    ( 2222个结果
IP 跟踪
#coding=utf-8import sysimport os import re import urllibimport subprocess def getlocation(ip): result = urllib.urlopen("http://www.ip138.com/ips.asp?i ...
分类:其他好文   时间:2017-03-18 01:15:54    阅读次数:151
pychallenge(4)-follow the chain
pychallenge之四 <!-- urllib may help. DON'T TRY ALL NOTHINGS, since it will never end. 400 times is more than enough. --> 点图片跳出了:and the next nothing is ...
分类:其他好文   时间:2017-03-17 23:40:39    阅读次数:243
Python3中urllib详细使用方法(header,代理,超时,认证,异常处理) 转载
urllib是python的一个获取url(Uniform Resource Locators,统一资源定址器)了,我们可以利用它来抓取远程的数据进行保存哦,下面整理了一些关于urllib使用中的一些关于header,代理,超时,认证,异常处理处理方法,下面一起来看看。 python3 抓取网页资源 ...
分类:编程语言   时间:2017-03-17 23:23:48    阅读次数:243
python
0x01 WEB urllib2.Request()//可以定制请求HTTP报头 urllib.urlretrieve()//可以用来下载文件 requests库(第三方库:pip install requests安装即可使用) ...
分类:编程语言   时间:2017-03-17 00:34:11    阅读次数:155
python beautifulsoup bs4爬虫 爬取糗事百科
声明:仅用于学习语法,请勿用于非法用途importurllib.requestimportrefrombs4importBeautifulSoup#-*-coding:utf-8-*-url=‘http://www.qiushibaike.com/hot/‘user_agent=‘Mozilla/4.0(compatible;MSIE5.5;WindowsNT)‘headers={‘User-Agent‘:user_agent}request=urllib.request..
分类:编程语言   时间:2017-03-15 19:29:06    阅读次数:425
python爬虫之urllib
#POST import urllib import urllib2 values = {} values['username'] = "1016903103@qq.com" values['password'] = "XXXX" data = urllib.urlencode(values) ur... ...
分类:编程语言   时间:2017-03-15 12:37:36    阅读次数:237
17.3.12--urllib2模块
1 urllib2是非常强大的Python网络资源访问模块,它的功能和urllib模块相似 python标准库中的urllib2模块可以说是urlib模块的一个升级的复杂版,不需要另外下载, 比如访问的网络资源需要http验证, 需要cookie信息, 模仿普通浏览器一样去访问网络,网页资源 这个时 ...
分类:Web程序   时间:2017-03-12 19:27:32    阅读次数:176
【Python】 http客户端库requests & urllib2 以及ip地址处理IPy
requests requests是个HTTPClient库,相比于urllib,urllib2等模块比更加简洁易用 ■ get请求 作为示例,讲一下关于requests如何发起并处理一个get请求 r是一个Response对象,可以用r查看很多信息 如r.status_code 查看本次请求的ht ...
分类:编程语言   时间:2017-03-12 15:30:19    阅读次数:969
python爬虫中文乱码问题
用urllib做一个简单的功能,抓取网页,然后打印,发现中文部分输出异常,全是16进制,如图 后面百度了一下,看了几张帖子,终于找到了解决方法,只需要将结果decode一下就ok,decode的编码根据不同的网站都不一样,一般为utf-8 之后输出结果正常 ...
分类:编程语言   时间:2017-03-09 18:15:29    阅读次数:148
爬虫之urllib2库的基本使用
urllib2库的基本使用 所谓网页抓取,就是把URL地址中指定的网络资源从网络流中读取出来,保存到本地。 在Python中有很多库可以用来抓取网页,我们先学习urllib2。 urllib2 是 Python2.7 自带的模块(不需要下载,导入即可使用) urllib2 官方文档:https:// ...
分类:Web程序   时间:2017-03-05 23:21:19    阅读次数:317
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!