一.urllib库 urllib是Python自带的一个用于爬虫的库，其主要作用就是可以通过代码模拟浏览器发送请求。其常被用到的子模块在Python3中的为urllib.request和urllib.parse，在Python2中是urllib和urllib2。 一般是用urllib 库 爬取图片比 ...
分类：
Web程序 时间：
2019-03-03 12:22:08
阅读次数：
218
当在安卓9.0加载网络请求数据时，如果抛出如下异常：Cause(1of1):classjava.io.IOException:CleartextHTTPtraffictoxxxx.xxxx.xxxxnotpermitted这是因为Android9.0版本系统默认支持一个网络访问协议：Https协议的网络，所以不支持网络访问：Http协议的网络面对这样的问题，解决办法：第一种办法在AndroidMa
分类：
移动开发 时间：
2019-03-03 12:16:05
阅读次数：
661
浏览器的同源策略和CORS跨域 什么是同源： 域名/ip + 端口 + 协议 http协议默认端口：80 https协议默认端口：443 浏览器对于非同源的请求会拒绝接受响应信息。 前后端分离的项目一般都会涉及到跨域问题 JSONP跨域（之前的解决方案） 不足： 只能GET请求 前端和后端都要支持 ...
分类：
其他好文 时间：
2019-02-27 22:10:49
阅读次数：
214
http协议： 官方解释：HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写,是用于从万维网（WWW:World Wide Web ）服务器传输超文本到本地浏览器的传送协议。 大白话：HTTP协议就是服务器（Server）和客户端（Client）之间进行数 ...
分类：
Web程序 时间：
2019-02-26 19:13:30
阅读次数：
179
### HTTP与HTTPSHTTP协议传输的数据都是未加密的，HTTPS协议是由HTTP+SSL协议构建的可进行加密传输、身份认证的网络协议，要比HTTP协议安全。**HTTPS和HTTP的区别**- HTTPS协议需要到ca申请证书，一般免费证书较少，因而需要一定费用。- HTTP是超文本传输协 ...
分类：
Web程序 时间：
2019-02-26 13:26:29
阅读次数：
255
前言 一个浏览器是怎么工作的？ 正文 URL变网页过程： 1.浏览器通过http或https协议，向服务端请求页面 2.将请求过来的HEML代码通过解析，构建DOM树 3.计算DOM树上的CSS属性 4.根据CSS属性，对元素逐个进行渲染，得到内存位图 5.一个可选的步骤是对位图进行合成，这会极大地 ...
分类：
Web程序 时间：
2019-02-26 01:21:57
阅读次数：
214
什么是RESTful RESTful API设计 API与用户的通信协议，总是使用HTTPs协议 域名 https://api.example.com 尽量将API部署在专用域名（会存在跨域问题） https://example.org/api/ API很简单 https://api.example ...
分类：
其他好文 时间：
2019-02-23 17:13:27
阅读次数：
219
一、抓取app的https协议 1、fiddler工具配置 在Tools->Options切换到Tab页HTTPS，勾选下图中箭头指向的复选框，并确认是否缺少协议，若缺少默认的协议，则增加，如缺少;tls1.2，注意分号间隔。 切换到tab页Connections，勾选Allow remote co ...
分类：
移动开发 时间：
2019-02-15 18:11:39
阅读次数：
295
HTTP和HTTPS的区别主要如下： 1、http明文传输，连接无状态；HTTPS协议是由SSL+HTTP协议构建的可进行加密传输、身份认证的网络协议，比http协议安全。 2、https协议需要到CA申请证书，一般免费证书较少，因而需要一定费用。 3、http端口80，https端口443。 HT ...
分类：
Web程序 时间：
2019-02-13 21:13:04
阅读次数：
189
url：统一资源定位符 网址，a链接，可以根据url获取指定的数据 聚焦爬虫：根据特定的需求，从网上把数据去下来 爬虫实现的思路： 网页的特点：每个网页有自己的url 网页是由HTML组成的 网页传输的时候使用http和https协议 爬取的思路： 使用一个url 写python代码，模拟浏览器发送 ...
分类：
其他好文 时间：
2019-02-11 21:25:46
阅读次数：
222
