import requests #引用requests模块import pygame# 获取天气def inquery(self): url = "https://free-api.heweather.com/v5/now?city={0}".format(self)+"&key=2d849c62d ...
分类：
编程语言 时间：
2018-11-02 01:52:52
阅读次数：
151
一，介绍 requests模块是python中原生的基于网络请求的模块，其主要作用是用来模拟浏览器发起请求。功能强大，用法简洁高效。在爬虫领域中占据着半壁江山的地位。 使用requests可以模拟浏览器的请求，比起之前用到的urllib，requests模块的api更加便捷（本质就是封装了urlli ...
分类：
其他好文 时间：
2018-10-29 22:56:19
阅读次数：
340
基础语法 发送请求 使用 Requests 发送网络请求非常简单。 一开始要导入 Requests 模块： 然后，尝试获取某个网页。本例子中，我们来获取 Github 的公共时间线： 现在，我们有一个名为 r 的 Response 对象。我们可以从这个对象中获取所有我们想要的信息。 Requests ...
分类：
其他好文 时间：
2018-10-28 19:31:58
阅读次数：
162
用python写爬虫时，有两个很好用第三方模块requests库和beautifulsoup库，简单学习了下模块用法： 1，requests模块 Python标准库中提供了：urllib、urllib2、httplib等模块以供Http请求，使用起来较为麻烦。requests是基于Python开发的 ...
分类：
其他好文 时间：
2018-10-28 12:49:49
阅读次数：
149
requests使用入门 问题：为什么要学习requests，而不是urllib? 1. requests的底层实现就是urllib 2. requests在python2和python3中通用，方法完全一样 3. requests简单易用 4. requests能够自动帮助我们解压（gzip压缩的 ...
分类：
其他好文 时间：
2018-10-27 00:12:04
阅读次数：
207
目标 之前的自动答复机器人需要从一个内部网页上获取的消息用于回复一些问题，但是没有对应的查询api，于是想到了用脚本模拟浏览器访问网站爬取内容返回给用户。详细介绍了第一次探索python爬虫的坑。 准备工作 requests模块向网站发送http请求，BeautifulSoup模块来从静态HTML文 ...
分类：
编程语言 时间：
2018-10-25 17:55:20
阅读次数：
252
实现思路： 由于反扒机制，所以需要做代理切换，去爬取，内容通过BeautifulSoup去解析，最后入mysql库 1.在西刺免费代理网获取代理ip，并自我检测是否可用 2.根据获取的可用代理ip去发送requests模块的请求，带上代理 3.内容入库 注：日志模块在上一篇随笔 下面附上代码 1.可 ...
分类：
数据库 时间：
2018-10-19 13:57:30
阅读次数：
366
request说明 虽然Python的标准库中 urllib2 模块已经包含了平常我们使用的大多数功能，但是它的 API 使用起来让人感觉不太好，而 Requests 自称 “HTTP for Humans”，说明使用更简洁方便。 Requests 唯一的一个非转基因的 Python HTTP 库， ...
分类：
其他好文 时间：
2018-10-19 00:20:56
阅读次数：
186
requests模块发送请求有data、json、params三种携带参数的方法。 params在get请求中使用，data、json在post请求中使用。 通过介绍，params是往url后面添加参数。 常见的form表单可以直接使用data参数进行报文提交，data的对象则是python中的字典 ...
分类：
编程语言 时间：
2018-10-16 16:06:18
阅读次数：
593
Requests模块；Beautiful Soup模块；实战：爬取汽车之家新网咨询，登录抽屉并点赞；Requests模块详细：所有的参数，Session，优化登录抽屉并点赞
分类：
编程语言 时间：
2018-10-15 20:49:10
阅读次数：
193
