一、背景利用Requests模块获取有道词典web页面的post信息,BeautifulSoup来获取需要的内容,通过tkinter模块生成gui界面。二、代码fanyi.py代码如下:#!/bin/envpython#-*-coding:utf-8-*-#_author:kaliarchimportrequestsimporturllib.parseimporttimeimportrandomi
分类:
编程语言 时间:
2018-02-22 19:43:07
阅读次数:
226
一、爬虫之requests a、介绍:使用requests可以模拟浏览器的请求,比起之前用到的urllib,requests模块的api更加便捷(本质就是封装了urllib3) b、注意:requests发送请求是将网页内容下载来以后,并不会执行js代码,这需要我们自己分析目标站点然后发起新的req ...
分类:
编程语言 时间:
2018-02-16 17:54:10
阅读次数:
250
Requests 是第三方模块,如果要使用的话需要导入。Requests也可以说是urllib模块的升级版,使用上更方便。 这是使用urllib的例子。 下面是Requests 模块的使用。 支持的请求: requests.get(‘https://github.com/timeline.json’ ...
分类:
编程语言 时间:
2018-02-15 16:56:20
阅读次数:
1152
一、背景利用Requests模块获取页面,BeautifulSoup来获取需要的内容,处理并返回结果。二、代码getinfo.py代码如下:#!/bin/envpython#-*-coding:utf-8-*-#_author:kaliarchimportreimportrequestsfrombs4importBeautifulSoupclassGetinformation:def__init_
分类:
编程语言 时间:
2018-02-12 11:27:14
阅读次数:
238
python访问网站可以用标准模块--urllib模块(这里省略),和requests(安装-pip install requests)模块,requests模块是在urllib的基础上进行的封装,比urllib模块功能更强到,易用 ...
分类:
编程语言 时间:
2018-02-10 21:22:56
阅读次数:
159
1.操作excel xlrd 读 xlwt 写 xlutils 修改2.网络编程 urllib url编码 requests模块 r = requests.get(url, data={'x': y}, headers={'x': y}, cookies={'x': y}) r = requests ...
分类:
编程语言 时间:
2018-02-09 20:52:57
阅读次数:
172
一、背景利用Requests模块获取页面,BeautifulSoup来获取需要的内容,最后利用xlsxwriter模块讲内容保存至excel,首先通过讲关键字收拾出来的页面获取到子页面的url,然后再次去抓取获取到子页面的信息保存到excel二、代码编写了两个模块,geturldytt和getexceldytt,最后在main内调用geturldyttd代码如下:#!/bin/envpython#
分类:
其他好文 时间:
2018-02-06 20:24:38
阅读次数:
314
Requests: 让 HTTP 服务人类 虽然Python的标准库中 urllib2 模块已经包含了平常我们使用的大多数功能,但是它的 API 使用起来让人感觉不太好,而 Requests 自称 “HTTP for Humans”,说明使用更简洁方便。 Requests 唯一的一个非转基因的 Py ...
分类:
其他好文 时间:
2018-02-04 18:12:40
阅读次数:
198
用requests 模块做了个简单的爬虫小程序,将博客的一篇文章以及图片保存到本地,文章格式存为'.html'。当文章保存到本地后,图片的连接可能是目标站点的绝对或者相对路径,所以要是想在本地也显示图片,需要将保存下来图片的本地路径替换到本地的html文件里。 保存网页用的时requests模块,保 ...
分类:
编程语言 时间:
2018-02-04 13:53:58
阅读次数:
539