码迷,mamicode.com
首页 >  
搜索关键字:urllib    ( 2222个结果
【Python3 爬虫】03_urllib.error异常处理
urllib.error可以接受来自urllib.request产生的异常。urllib.error有两个方法:①URLError ②HTTPErrorURLErrorURLError产生的原因①网络无连接,即本机无法上网②连接不到特定的服务器③服务器不存在运行结果表明:连接超时HTTPErrorH... ...
分类:编程语言   时间:2018-03-23 11:34:39    阅读次数:297
django— json模块api查询(5)
1.修改收集脚本#/usr/bin/env?python #coding:?utf-8 from?subprocess?import?PIPE,Popen import?urllib,urllib2 import?pickle import?json def?getIfconfig(): ?&nb
分类:Windows程序   时间:2018-03-22 20:34:37    阅读次数:264
瞎爬些图
1 import urllib 2 import re 3 4 url = "https://www.duitang.com/search/?kw=%E9%AC%BC%E6%80%AA&type=feed" 5 page = urllib.urlopen(url) 6 html = page.rea ...
分类:其他好文   时间:2018-03-22 17:26:15    阅读次数:152
【Python】help与dir的用法
当你给dir()提供一个模块名字时,它返回在那个模块中定义的名字的列表。当没有为其提供参数时, 它返回当前模块中定义的名字的列表。如果您需要快速获取任何的Python函数或语句的信息,那么您可以使用内置的“help”(帮助)功能示例from urllib import requestprint(di... ...
分类:编程语言   时间:2018-03-22 17:22:18    阅读次数:208
Python_爬虫_豆瓣(存数据库、图片)
豆瓣3.21 1 #coding:utf-8 2 #采集豆瓣书信息和图片,写进数据库 3 4 from urllib import request 5 # from bs4 import BeautifulSoup 6 from lxml import etree 7 import json,pym ...
分类:数据库   时间:2018-03-22 10:50:55    阅读次数:201
Python下载图片小程序
欢迎大侠们指正批评 思路: 1、引入相关的python文件(import re import urllib) 2、读取对应网页的html文件(使用 urllib) 3、在读取的html文件中使用正则表达式匹配图片路径并保存图片 ...
分类:编程语言   时间:2018-03-21 23:45:26    阅读次数:416
Gitbush笔记
1、如果要想模拟浏览器发送get请求,就要使用Request对象,通过Request对象添加HTTP头,就可以伪装成浏览器。 from urllib impor request req=request.Request("http://www.bnaid.com") req.add_header('U ...
分类:其他好文   时间:2018-03-21 23:21:31    阅读次数:263
6、通过xpath获取网页数据
from urllib import request from lxml import etree # 请求的url url = "http://www.dfenqi.cn/Product/Index" # 请求的头文件 headers = { "User-Agent": "Mozilla/5.0 ...
分类:Web程序   时间:2018-03-21 17:29:09    阅读次数:334
1、python爬虫 request.urlopen请求网页获取源码
# python3导入request包 from urllib import request import sys import io # 如果需要用print打印时,如果出现异常可以先设置输出环境 sys.stdout = io.TextIOWrapper(sys.stdout.buffer, e ...
分类:编程语言   时间:2018-03-20 18:49:54    阅读次数:175
Python 的 urllib.parse 库解析 URL
Python 中的 urllib.parse 模块提供了很多解析和组建 URL 的函数。 解析url urlparse() 函数可以将 URL 解析成 ParseResult 对象。对象中包含了六个元素,分别为: 协议(scheme)域名(netloc)路径(path)路径参数(params)查询参 ...
分类:编程语言   时间:2018-03-18 21:40:14    阅读次数:273
2222条   上一页 1 ... 97 98 99 100 101 ... 223 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!