码迷,mamicode.com
首页 >  
搜索关键字:urllib2    ( 763个结果
python3.x以上 爬虫 使用问题 urllib(不能使用urllib2)
问题一: python 3.x 以上版本揽括了 urllib2,把urllib2 和 urllib 整合到一起。 并且引入模块变成一个,只有 import urllib 所以不能使用 urllib2.urlopen()方法,否则会报错无此模块。 3.x以上版本 # urllib2.open 不能使用 ...
分类:编程语言   时间:2018-04-17 17:01:53    阅读次数:26
【python】爬取糗事百科段子
#-*-coding:utf-8-*- import urllib import urllib2 import re def get_duanzi(url): store=[] user_agent='Mozilla/5.0 (Windows NT 10.0; WOW64)' headers={'U... ...
分类:编程语言   时间:2018-04-14 12:33:11    阅读次数:22
拉取数据经典版
1 #! /usr/bin/env python 2 # coding=utf-8 3 import pymysql 4 import json 5 import urllib 6 import time 7 import urllib2 8 import urllib 9 import datet ...
分类:其他好文   时间:2018-04-11 18:07:12    阅读次数:17
python网络编程
一、python操作网络,也就是打开一个网站,或者请求一个http接口,使用urllib模块。 urllib模块是一个标准模块,直接import urllib即可,在python3里面只有urllib模块,在python2里面有urllib模块和urllib2模块。 1 2 3 4 5 6 7 8 ...
分类:编程语言   时间:2018-04-07 12:42:04    阅读次数:13
Python利用cookie模拟网站登录
Cookie,指某些网站为了辨别用户身份、进行session跟踪而储存在用户本地终端上的数据(通常经过加密)比如说有些网站需要登录后才能访问某个页面,在登录之前,你想抓取某个页面内容是不允许的。那么我们可以利用Urllib2库保存我们登录的Cookie,然后再抓取其他页面就达到目的了[[email protected]~]# cat cscook.py #!/usr/bin/python #-*- c
分类:编程语言   时间:2018-04-04 12:55:42    阅读次数:33
urllib2模块使用
urllib2库是python中自带的用来进行网络抓取的库,在python3中 urllib2库被改为urllib.request urllib2中常用方法: 1.urlopen :向指定服务器发送请求,并返回服务器相应的类文件对象 2.request:当需要增加http报头等较复杂的操作的时候,创 ...
分类:Web程序   时间:2018-04-04 00:04:18    阅读次数:32
爬虫基础之Requests
requests Python标准库中提供了:urllib、urllib2、httplib等模块以供Http请求,但是,它的 API 太渣了。它是为另一个时代、另一个互联网所创建的。它需要巨量的工作,甚至包括各种方法覆盖,来完成最简单的任务。 Requests 是使用 Apache2 License ...
分类:其他好文   时间:2018-04-01 10:40:52    阅读次数:49
python网络爬虫笔记(九)
4.1.1 urllib2 和urllib是两个不一样的模块 urllib2最简单的就是使用urllie2.urlopen函数使用如下 urllib2.urlopen(url[,data[,timeout[,cafile[,capath[,cadefault[,context]]]]]]) 按照文档 ...
分类:编程语言   时间:2018-03-30 23:07:38    阅读次数:17
Web Scraping with Python第一章
1. 认识urllib urllib是python的标准库,它提供丰富的函数例如从web服务器请求数据、处理cookie等,在python2中对应urllib2库,不同于urllib2,python3的urllib被分为若干子模块:urllib.request、urllib.parse、urllib ...
分类:编程语言   时间:2018-03-28 00:02:46    阅读次数:29
django— json模块api查询(5)
1.修改收集脚本#/usr/bin/env?python #coding:?utf-8 from?subprocess?import?PIPE,Popen import?urllib,urllib2 import?pickle import?json def?getIfconfig(): ?&nb
分类:Windows程序   时间:2018-03-22 20:34:37    阅读次数:53
763条   1 2 3 4 ... 77 下一页
© 2014 mamicode.com 版权所有 京ICP备13008772号-2
迷上了代码!