码迷,mamicode.com
首页 >  
搜索关键字:urllib2    ( 826个结果
爬虫第一篇基本库的使用——urllib
在Python2中有urllib2和urllib3两个库来实现请求的发送,在Pyhon3中则统一为urllib。 urilib包含以下4个模块 一 request模块使用方法 1.urlopen() 基本HTTP请求构造方法 返回结果是一个HTTPResponse类型的对象,主要包含read(),r ...
分类:Web程序   时间:2018-07-19 10:50:53    阅读次数:35
requests
requests Python标准库中提供了:urllib、urllib2、httplib等模块以供Http请求,但是,它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务。 Requests 是使用 Apache2 License ...
分类:其他好文   时间:2018-07-18 23:20:02    阅读次数:33
python3: 爬虫---- urllib, beautifulsoup
最近晚上学习爬虫,首先从基本的开始; python3 将urllib,urllib2集成到urllib中了, urllib可以对指定的网页进行请求下载, beautifulsoup 可以从杂乱的html代码中 分离出我们需要的部分; 注: beautifulsoup 是一种可以从html 或XML文 ...
分类:编程语言   时间:2018-07-16 22:16:50    阅读次数:55
7-python自定义opener
Handler处理器 和 自定义Opener opener是 urllib2.OpenerDirector 的实例,我们之前一直都在使用的urlopen,它是一个特殊的opener(也就是模块帮我们构建好的)。 但是基本的urlopen()方法不支持代理、cookie等其他的HTTP/HTTPS高级 ...
分类:编程语言   时间:2018-07-14 14:56:03    阅读次数:48
Python爬虫基础与技巧
基于Python2.71 基本抓取网页get 方法import urllib2url = "http://www.baidu.com"response = urllib2.urlopen(url)print response.read()post 方法import urllibimport urll
分类:编程语言   时间:2018-07-02 15:34:10    阅读次数:46
python 实现监测consul服务状态,发送邮件短信
# -*-coding:utf-8-*- import redis import urllib2 import json import smtplib import time from qcloudsms_py import SmsMultiSender from qcloudsms_py.http
分类:编程语言   时间:2018-06-29 16:29:07    阅读次数:56
requests+BeautifulSoup详解
简介 Python标准库中提供了:urllib、urllib2、httplib等模块以供Http请求,但是,它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务。 Requests 是使用 Apache2 Licensed 许可证的 ...
分类:其他好文   时间:2018-06-26 01:13:38    阅读次数:162
python2.7 urllib2 爬虫
# _*_ coding:utf-8 _*_import urllib2import cookielibimport randomimport refrom bs4 import BeautifulSoupimport datetimedax = datetime.datetime.now().st ...
分类:编程语言   时间:2018-06-17 23:25:16    阅读次数:71
爬虫二(urllib模块)
1、在python2和python3中的差异 在python2中,urllib和urllib2各有各自的功能,虽然urllib2是urllib的升级版,但是urllib2还是不能完全替代urllib,但是在python3中,全部封装成一个类,即urllib python2中urllib2和urlli ...
分类:Web程序   时间:2018-06-16 00:59:45    阅读次数:52
python爬虫(二)
python爬虫之urllib 在python2和python3中的差异 在python2中,urllib和urllib2各有各个的功能,虽然urllib2是urllib的升级版,但是urllib2还是不能完全替代urllib,但是在python3中,全部封装成一个类urllib。 Urllib2可 ...
分类:编程语言   时间:2018-06-15 17:51:57    阅读次数:65
826条   上一页 1 2 3 4 5 6 ... 83 下一页
© 2014 mamicode.com 版权所有 京ICP备13008772号-2
迷上了代码!