码迷,mamicode.com
首页 >  
搜索关键字:urllib    ( 1624个结果
爬虫之Resquests模块的使用(二)
Requests Requests模块 Requests模块是一个用于网络访问的模块,其实类似的模块有很多,比如urllib,urllib2,httplib,httplib2,他们基本都提供相似的功能。 在上一篇我们已经使用urllib模块 而Requests会比urllib更加方便,可以节约我们大 ...
分类:其他好文   时间:2018-10-15 20:41:47    阅读次数:5
豆瓣电影 Top 250
# by luffycity.comimport refrom urllib.request import urlopendef getPage(url): # 获取网页的字符串 response = urlopen(url) return response.read().decode('utf-8 ...
分类:其他好文   时间:2018-10-15 16:16:50    阅读次数:9
爬虫链家网站获取信息
import re import json from urllib.request import urlopen import ssl # ?掉数字签名证书 ssl._create_default_https_context = ssl._create_unverified_context ersh... ...
分类:Web程序   时间:2018-10-14 14:09:30    阅读次数:11
《python3网络爬虫开发实战》--基本库的使用
1. urllib: 2. Handle类: 当需要实现高级的功能时,使用Handle 3. urljoin 我们可以提供一个 base_url (基础链接 )作为第一个参数,将新的链接作为第二个参数,该方法会分析 base_url 的 scheme、 netloc 和 path这 3个内容并对新链 ...
分类:编程语言   时间:2018-10-13 22:44:21    阅读次数:14
爬虫初识(爬取dytt电影列表及下载地址)
import re from urllib.request import urlopen def getPage(url): response=urlopen(url) return response.read().decode('gbk',errors='ignore') def parsePag... ...
分类:其他好文   时间:2018-10-12 21:21:10    阅读次数:40
Python爬虫3-----Urllib库的基本使用1
什么是Urllib Urllib是python内置的HTTP请求库包括以下模块urllib.request 请求模块urllib.error 异常处理模块urllib.parse url解析模块urllib.robotparser robots.txt解析模块 urlopen 关于urllib.re ...
分类:编程语言   时间:2018-10-12 17:03:29    阅读次数:15
读取网页的方法-爬虫学习
1、读取全部网页 2、读取每一行的数据,压入列表 3、网页抽象为文件 ...
分类:Web程序   时间:2018-10-09 13:58:17    阅读次数:27
初识装饰器
杂记: import time #调包 time.time() #查看起始时间或者结束时间 time.clock() #查看起始时间或者结束时间 time.sleep #停止多少秒后开始运行代码 import urllib #用于读取网上服务器的数据 from urllib.urlopen impo ...
分类:其他好文   时间:2018-10-08 19:38:50    阅读次数:21
简单爬虫
import urllib.request import re import urllib.error keyname = "短裙" key = urllib.request.quote(keyname) #进行编码 #伪装浏览器 (因为淘宝能够识别是否为爬虫程序) headers = ("User ...
分类:其他好文   时间:2018-10-05 14:04:47    阅读次数:25
urllib获取get/post请求
from urllib.request import urlopenfrom urllib.parse import urlencode获取get请求# url='http://www.nnzhp.cn'# res=urlopen(url)# print(res.read().decode())二、 ...
分类:Web程序   时间:2018-10-04 11:38:41    阅读次数:12
1624条   1 2 3 4 ... 163 下一页
© 2014 mamicode.com 版权所有 京ICP备13008772号-2
迷上了代码!