为了获取一些网络中的数据，我们需要掌握抓包技术。 Charles是一个 HTTP 代理服务器， HTTP 监视器,反转代理服务器.它允许一个开发者查看所有连接互联网的 HTTP 通信.这些包括Request，Response现HTTP Headers (包含Cookies与Caching信息). C ...
分类：
其他好文 时间：
2017-06-03 16:21:22
阅读次数：
249
在POST请求中偶尔会出现“CAUTION: Provisional headers are shown” 这个警告的意思是说：请求的资源可能会被（扩展／或其它什么机制）屏蔽掉。 之所以会出现这个警告。是由于去获取该资源的请求事实上并（还）没有真的发生，所以 Header 里显示的是伪信息，直到se ...
分类：
其他好文 时间：
2017-06-02 21:08:14
阅读次数：
6359
html创建一个存放内容的容器，以及分页的容器: <div id="content"></div> <div id="pager"></div> js如下： $.ajax({ url: "url",//headers: {//"AccessToken" : "token"//}, //如果需要 ty ...
分类：
其他好文 时间：
2017-06-02 17:19:05
阅读次数：
128
系统信息 arch 显示机器的处理器架构(1) uname -m 显示机器的处理器架构(2) uname -r 显示正在使用的内核版本 dmidecode -q 显示硬件系统部件 - (SMBIOS / DMI) hdparm -i /dev/hda 罗列一个磁盘的架构特性 hdparm -tT / ...
分类：
系统相关 时间：
2017-06-02 12:44:40
阅读次数：
261
搭建简单的测试环境 什么是响应首部 最简单的响应首部——Content-Type 设置响应首部 请求重定向与响应首部 在浏览器中查看Response Headers 1、先快速搭建一个简单的测试环境，以后的内容都将基于下面的这些代码，tomcat webapps：html5+web.xml+serv ...
分类：
Web程序 时间：
2017-06-01 23:38:17
阅读次数：
332
直接上代码: 爬下来的图片: 参考资料: Python爬虫实战四之抓取淘宝MM照片 ...
分类：
编程语言 时间：
2017-06-01 20:29:11
阅读次数：
285
1、反盗链的原理 就是使用Request Headers中的Referer信息，它会告诉服务器我是从哪里请求过来的。因此，服务端就可以根据这个参数信息，进行反盗链。 破解方法： 1)a标签的话，可以加上rel="noreferrer"，这个是h5一个属性，存在兼容性问题 2)https://gith ...
分类：
其他好文 时间：
2017-06-01 14:44:59
阅读次数：
248
Cookie是存储在客户端浏览器中的数据，我们通过Cookie来跟踪与存储用户数据。一般情况下，Cookie通过HTTP headers从服务端返回到客户端。多数web程序都支持Cookie的操作，因为Cookie是存在于HTTP的标头之中，所以必须在其他信息输出以前进行设置，类似于header函数... ...
分类：
Web程序 时间：
2017-06-01 13:09:36
阅读次数：
160
import requests import http.cookiejar as cookielib import re import time import os.path from PIL import Image # 构造 Request headers headers = { "Host":... ...
分类：
其他好文 时间：
2017-06-01 10:29:46
阅读次数：
235
爬取小说网站的小说，并保存到数据库第一步：先获取小说内容#!/usr/bin/python
#-*-coding:UTF-8-*-
importurllib2,re
domain=‘http://www.quanshu.net‘
headers={
"User-Agent":"Mozilla/5.0(WindowsNT6.3;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/58.0.3029.1..
分类：
数据库 时间：
2017-06-01 00:28:26
阅读次数：
689
