码迷,mamicode.com
首页 >  
搜索关键字:urlopen    ( 699个结果
获取带接口的股票数据
mport urllib.request import re codeUrl = 'https://hq.gucheng.com/gpdmylb.html' #获取股票代码 def codeTolist(): codeList = [] html = urllib.request.urlopen(c ...
分类:其他好文   时间:2019-12-16 19:41:51    阅读次数:109
python数据挖掘第二篇-爬虫
python爬虫 urllib用法 eg1: from urllib import request data = request.urlopen(urlString).read() data获取的是该网页的所有源码内容 data=data.decode("utf 8") 对data编码 import ...
分类:编程语言   时间:2019-12-13 13:36:13    阅读次数:81
爬虫之Handler处理器和自定义Opener
一、Handler处理器和自定义Opener opener是 request.OpenerDirector 的实例,我们之前一直都在使用的urlopen,它是一个特殊的opener(也就是模块帮我们构建好的)。但是基本的urlopen()方法不支持代理、cookie等其他的HTTP/HTTPS高级功 ...
分类:其他好文   时间:2019-11-26 19:29:14    阅读次数:67
读取指定页面中的超链接-Python 3.7
#!/usr/bin/env python#coding: utf-8from bs4 import BeautifulSoupimport urllibimport urllib.requestimport sysfrom imp import reloadreload(sys)#sys.setd ...
分类:编程语言   时间:2019-11-20 19:26:37    阅读次数:60
爬虫之Urllib
urllib是python内置的HTTP请求库包括以下模块 urllib.request 请求模块 urllib.error 异常处理模块 urllib.parse url解析模块 urllib.robotparser robots.txt解析模块 urlopen 关于urllib.request. ...
分类:Web程序   时间:2019-11-17 18:04:42    阅读次数:96
执行buildman --fetch-arch arm提示"urllib2.URLError: <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:581)>"如何处理?
答: 在uboot源码的tools/buildman/toolchain.py中取消证书验证,修改内容如下: ...
分类:Web程序   时间:2019-11-07 12:56:11    阅读次数:160
python爬取网页数据方法
"""#最基本,请求地址无参数# response=urllib.request.urlopen("https://www.scetc.edu.cn")## html=response.read().decode("utf-8")## print(html) #第二种,传参数的情况#参数的转换 参数 ...
分类:编程语言   时间:2019-11-04 22:01:21    阅读次数:119
简单爬取一张图片
# crawl a image import urllib.request response = urllib.request.urlopen("http://placekitten.com/200/300") #load html with open("C:/Users/Mike1/Desktop ...
分类:其他好文   时间:2019-11-03 11:08:01    阅读次数:75
记录python2.7迁移到python3.6过程中的一些代码差异
| python2.7 | python 3.6 | | | | | import?urllib2 | import?urllib | | import urlparse | import urllib | | import?exceptions | 废弃 | | urllib2.urlopen | ...
分类:编程语言   时间:2019-10-31 18:36:37    阅读次数:106
爬虫页面
9.31 爬取百度 import urllib.request response=urllib.request.urlopen('http://www.baidu.com')print(response.read().decode('utf-8')) 爬取 10.1 10.2 Python 爬虫架构 ...
分类:其他好文   时间:2019-10-12 20:24:21    阅读次数:146
699条   上一页 1 ... 4 5 6 7 8 ... 70 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!