一、需要使用requests下的会话对象； 会话对象让你能够跨请求保持某些参数。它也会在同一个Session实例发出的所有请求之间保持cookie。 方法级别的参数不会被跨请求保持。 参考：https://requests.readthedocs.io/zh_CN/latest/user/advan ...
分类：
编程语言 时间：
2020-07-27 15:46:41
阅读次数：
134
1.requests库发送请求时，params和data、json的区别 params的时候之间接把参数加到url后面，只在get请求时使用,data、json是用在post请求，json是传递的json格式的数据 params: (optional) Dictionary or bytes to ...
分类：
编程语言 时间：
2020-07-26 19:22:19
阅读次数：
72
help函数 help(requests)查看相关注释和案例内容。 发送post请求的接口（dict参数） 发送post请求的接口（json参数） post的body是json类型，也可以用json参数传入。 先导入json模块，用dumps方法转化成json格式。 请求头header 现在由于对接 ...
分类：
编程语言 时间：
2020-07-26 15:59:10
阅读次数：
89
在得到返回的对象(response)后，一般不去刻意查看，是不知道编码方式的。 通常直接猜即可，因为大多数都是使用的“utf-8”。 在requests里的快捷的解码方式可以使用如下几种： 1. response.text ·类型：str ·解码类型：根据http头部对响应的编码作出推测 ·修改：r ...
分类：
其他好文 时间：
2020-07-24 21:38:28
阅读次数：
129
#!/usr/bin/python #你要的文件夹是 E://pics// ps:没有的话帮你建一个 import requests import os from datetime import datetime url="https://area.sinaapp.com/bingImg" root ...
分类：
编程语言 时间：
2020-07-24 16:44:14
阅读次数：
75
知网爬取勿做商用 import requests, time, parsel, re from selenium.webdriver.chrome.options import Options from urllib.parse import urlencode from selenium impo ...
分类：
其他好文 时间：
2020-07-23 16:07:56
阅读次数：
157
聚焦爬虫:爬取页面中指定的页面内容。编码流程：1.指定url2.发起请求3.获取响应数据4.数据解析5.持久化存储数据解析分类：1.bs42.正则3.xpath(***)数据解析原理概述：解析的局部的文本内容都会在标签之间或者标签对应的属性中进行存储1.进行指定标签的定位2.标签或者标签对应的属性中存储的数据值进行提取（解析）bs4进行数据解析数据解析的原理：1.标签定位2.提取标签、标签属性中存
分类：
编程语言 时间：
2020-07-22 20:21:41
阅读次数：
68
项目中需要添加以下依赖项，在控制台中执行安装依赖项： Install-Package Aliyun.OSS.SDK --适用于.NET版本 Install-Package Aliyun.OSS.SDK.NetCore --适用.NET Core版本 以下是封装的上传下载以及生成图片链接的方法： // ...
分类：
Web程序 时间：
2020-07-21 23:17:05
阅读次数：
97
<div id="cnblogs_post_body" class="blogpost-body "> <p><strong>Broker Configs</strong></p><p> </p><p> </p><table style="width: 800px; ...
分类：
其他好文 时间：
2020-07-20 17:18:44
阅读次数：
72
闲言 requests模块是一个不完全模拟浏览器行为的模块，只能爬取到网页的HTML文档信息，无法解析和执行CSS、JavaScript代码，因此要我们做人为判断。 selenium模块本质是通过驱动浏览器完全模拟浏览器的操作，比如跳转、输入、点击、下拉等，来拿到网页渲染之后的结果，可支持多种浏览器 ...
分类：
其他好文 时间：
2020-07-20 15:49:27
阅读次数：
86
