#coding:utf-8 import requests,json #第一行注解的#coding:utf-8表示可以支持中文,不然代码里面有中文会报错 url = "http://xxx" headers = {"Content-Type":"application/json","Authoriz... ...
分类:
编程语言 时间:
2019-05-20 17:25:51
阅读次数:
336
什么是爬虫? 请求网站并提取数据的自动化程序 爬虫基本流程 1.发起请求,通过HTTP库向目标站点发起请求,即发送一个Request,请求包含额外的headers信息 2.获取响应内容,如果服务器正常相应,得到一个Response 3.解析内容,得到的内容可能是HTML,JSON,二进制数,可以保存 ...
分类:
其他好文 时间:
2019-05-19 23:12:15
阅读次数:
149
yum yum命令:用于添加/删除/更新RPM包,自动解决包的依赖问题以及系统更新升级 参数 例1 1.安装 2.更新和升级 3.查找和显示 4.删除 5.清除缓存 例2 1.搜索安装包 例3 1.查看历史记录 例4 1.生成缓存 例5 ...
分类:
其他好文 时间:
2019-05-18 15:36:06
阅读次数:
105
1 确保安装过gcc yum install gcc 2 获取glibc相关版本 wget http://ftp.gnu.org/pub/gnu/glibc/glibc-2.17.tar.xz 3 解压创建目录 xz -d glibc-2.17.tar.xz tar -xvf glibc-2.17. ...
分类:
其他好文 时间:
2019-05-14 18:55:37
阅读次数:
87
实现效果: 在上述代码中,需要装到requests、psutil、pyaudio等库,其中pyaudio这个库在python3环境下装比较特殊, windows环境下具体步骤如下: 第一步:下载whl文件支持 url:https://www.lfd.uci.edu/~gohlke/pythonlib ...
分类:
其他好文 时间:
2019-05-14 16:21:18
阅读次数:
475
HTTP中的请求头和响应头属性解析 下面总结一下平时web开发中,HTTP请求的相关过程以及重要的参数意义 一次完整的HTTP请求所经历的7个步骤 说明:HTTP通信机制是在一次完整的HTTP通信过程中,web浏览器与web服务器之间将完成下列7个步骤: 一、General Headers 通用信息 ...
分类:
Web程序 时间:
2019-05-14 12:45:53
阅读次数:
272
Request 四要素: URL:请求的地址,如果有参数会自动解析显示在Params中,如果手动在Params添加参数,也会自动补充到URL中. Method:GET、POST、PUT、PATCH、DELETE、COPY... Headers:可以随便添加、编辑Header attribute(头文 ...
分类:
其他好文 时间:
2019-05-13 22:51:30
阅读次数:
118
robots 防君子不防小人 UA伪装 request 设置headers参数 ajax 动态数据json 图片懒加载 src2/origin 数据加密 js代码里面一些function 加密算法 验证码 云打码/超级鹰12306 cookie session会话 哈希值 xpath element ...
分类:
其他好文 时间:
2019-05-12 19:42:18
阅读次数:
101
简介 发邮件前我们需要了解的是邮件是怎么一个形式去发送到对方手上的,通俗点来说就是你写好一封信,然后装进信封,写上地址,贴上邮票,然后就近找个邮局,把信仍进去,其他的就不关心了,只是关心时间,而电子邮件不像日常发送邮件的按天算,时间都是按 秒算的。 电子邮件的发送流程: 1、你使用某款电子邮件软件M ...
分类:
编程语言 时间:
2019-05-10 13:15:01
阅读次数:
647
What is 图片懒加载? 图片懒加载是一种网页优化技术,图片在被请求时也与普通静态资源一样,占用资源,然而当一个图片类型在刚被初次请求的时候不可以一次性加载所有的图片,因为这样太过于浪费网络资源,还增加了页面加载时间,通过前后端配合处理,使图片仅在浏览器当前视窗内出现的时候才加载该图片,达到减少 ...
分类:
其他好文 时间:
2019-05-09 21:37:24
阅读次数:
135