先上一高清无码大图，让大家过过眼瘾。 爬虫一共就四个主要步骤： 1、明确目标：明确需要抓取那些内容，在哪个网页2、爬：分析网站结构，将所有的网站的内容全部爬下来3、取：提取我们所需要的数据4、处理数据：按照需求存储使用 第一步： 明确目标：网站url: https://mm.taobao.com/s ...
分类：
其他好文 时间：
2018-02-07 00:49:34
阅读次数：
224
我这边环境是原先有个nginx只是做了代理转发，现在需要在通过nginx做yum源方便后期安装源1、原先的配置代理转发，为不影响原先配置及端口，在http中最末尾加“includeinclude/local/nginx/conf.d/*.conf;”加载其它配置文件。nginx所有服务器地址是10.7.12.10#cat/local/nginx/conf/nginx.confusernginxng
分类：
其他好文 时间：
2018-02-05 16:01:02
阅读次数：
162
在应用有frameset或者iframe的页面时，parent是父窗口，top是最顶级父窗口（有的窗口中套了好几层frameset或者iframe），self是当前窗口， opener是用open方法打开当前窗口的那个窗口。 1、window.self 功能：是对当前窗口自身的引用。它和window ...
分类：
其他好文 时间：
2018-02-03 19:03:22
阅读次数：
233
日志格式：常用日志格式 log_format main '$remote_addr - $remote_user [stime_local] $request' '"$status" $body_bytes_sent "$http_referer"' '"$http_user_agent" "$ht ...
分类：
其他好文 时间：
2018-01-31 22:18:41
阅读次数：
226
1、http请求中产生的两个核心对象 http请求：HttpRequesthttp响应: HttpResponse 所在位置: django.http 1、HttpRequest：HttpRequest对象属性 1.1 path请求页面的全路径，不包括域名，例如，"/music/bands/the_ ...
分类：
其他好文 时间：
2018-01-30 00:21:37
阅读次数：
190
这个和less18一样，都是基于header的注入 这次的字段是referer ...
分类：
数据库 时间：
2018-01-26 18:48:26
阅读次数：
313
原文：https://book.2cto.com/201304/19618.html 1.5 configure详解 可以看出，configure命令至关重要，下文将详细介绍如何使用configure命令，并分析configure到底是如何工作的，从中我们也可以看出Nginx的一些设计思想。 1.5... ...
分类：
其他好文 时间：
2018-01-25 18:19:23
阅读次数：
143
Python3.x：BeautifulSoup()解决中文乱码问题 问题： BeautifulSoup获取网页内容，中文显示乱码； 解决方案： 如果中文页面编码是gb2312，gbk，在BeautifulSoup构造器中传入fromEncoding="gb18030"参数即可解决乱码问题， 即使分析 ...
分类：
编程语言 时间：
2018-01-20 11:07:49
阅读次数：
303
8播出认证相关接口8.1.开启播出认证用途针对某个应用，开启播出认证。开启播出认证后，所有播放该应用下的视频流的请求都需要做合法性认证，只有认证通过的请求才会允许播放。认证的方法包括token认证、referer认证和第三方认证。token认证，就是为每个播出流配置一个认证码(token)，播放终端只有获得该认证码，并将该认证码作为播出请求的参数提交，才能够正常播放视频。referer认证，就是要
分类：
其他好文 时间：
2018-01-18 18:53:42
阅读次数：
188
1.spiders文件夹下的爬虫文件 2.pipelines.py ...
分类：
其他好文 时间：
2018-01-17 21:58:08
阅读次数：
205
