requests模块中,r.json()为Requests中内置的JSON解码器 其中只有response返回为json格式时,用r.json()打印出响应的内容, 如果response返回不为json格式,使用r.json()会报错 报错内容:ValueError: Expecting prope ...
分类:
Web程序 时间:
2017-08-31 16:11:39
阅读次数:
331
用到的模块:threading多线程模块 requests模块 BeautifulSoup模块 实现功能:可以通过命令行控制关键字以及线程数,实现百度的url采集 代码如下: #!/usr/bin/env python# -*- coding: utf-8 -*-# @Date : 2017-08- ...
分类:
编程语言 时间:
2017-08-25 15:59:05
阅读次数:
295
1. pip安装requests模块超时 2. 解决方法,加大超时时间 ...
分类:
其他好文 时间:
2017-08-14 21:24:09
阅读次数:
1062
第三百二十二节,web爬虫,requests请求 requests请求,就是用yhthon的requests模块模拟浏览器请求,返回html源码 模拟浏览器请求有两种,一种是不需要用户登录或者验证的请求,一种是需要用户登录或者验证的请求 一、不需要用户登录或者验证的请求 这种比较简单,直接利用req ...
分类:
Web程序 时间:
2017-07-23 10:18:44
阅读次数:
178
下载图片 下载图片需要导入requests模块,用requests的content方法来获取图片 ...
分类:
编程语言 时间:
2017-07-12 01:15:26
阅读次数:
267
python操作网络,也就是打开一个网站,或者请求一个http接口。 使用requests模块,pip install requests 安装即可。 requests 模块是基于urllib模块进行开发的,urllib用起来比较麻烦:传参数的话,都得是bytes类型,返回数据也是bytes类型,还得 ...
分类:
编程语言 时间:
2017-07-09 12:41:57
阅读次数:
227
简介: requests是python的一个http客户端库,跟urlib、urlib2类似,requests模块是基于urlib模块开发的,代码实现更为简洁。 模块安装: pip install requests ,使用requests模块时直接import requests即可。 简单使用req ...
分类:
编程语言 时间:
2017-07-09 10:56:14
阅读次数:
457
可以使用python自带的urllib模块去请求一个网站,或者接口,但是urllib模块太麻烦了,传参数的话,都得是bytes类型,返回数据也是bytes类型,还得解码,想直接把返回结果拿出来使用的话,还得用json,发get请求和post请求,也不通,使用比较麻烦,还有一个比较方便的模块,比url ...
分类:
编程语言 时间:
2017-07-08 16:55:34
阅读次数:
214
1.pip安装xlrd,xlwt,requests模块. 2.在工程目录处放置地点Excel文件。 python代码: 运行即可得到data.xls结果文件。 ...
分类:
编程语言 时间:
2017-07-05 23:40:07
阅读次数:
1853
这是代码,只下载用requests 模块python3下载的url是我自己在页面上找的,如下图视频是在video标签中的,这里是h5的播放方式,flash播放的话我不知道怎么下载, 如果想批量下载的话需要分析页面,这个页面中应该也是有下一节的链接,就依次爬取即可,或许应该开个多线程就合适了 ...
分类:
编程语言 时间:
2017-06-22 18:38:34
阅读次数:
248