Socket5 curl --socks5 10.2.46.19:10808 http://www.baidu.com # 查询结果 <!DOCTYPE html> <!--STATUS OK--><html> <head><meta http-equiv=content-type content= ...
分类：
Web程序 时间：
2020-02-13 12:59:22
阅读次数：
150
缓存命中 缓存再验证成功 缓存再验证失败 = 缓存未命中 Cache_Control 可缓存性|解释 | public|HTTP请求返回的过程中，在cache_control中设置这个值，代表HTTP请求返回的内容所经过的任何路径当中（包括中间一些HTTP代理服务器以及发出请求的客户端浏览器），都可 ...
分类：
Web程序 时间：
2020-02-13 09:36:58
阅读次数：
102
[TOC] Squid Cache（简称为Squid）是HTTP代理服务器软件。Squid用途广泛，可以作为缓存服务器，可以过滤流量帮助网络安全，也可以作为代理服务器链中的一环，向上级代理转发数据或直接连接互联网。Squid程序在Unix一类系统运行。由于它是开源软件，有网站修改Squid的源代码， ...
分类：
其他好文 时间：
2020-02-13 09:34:29
阅读次数：
156
临时代理 永久代理 这种方法相当于在.gitconfig文件中写入： ...
分类：
Web程序 时间：
2020-02-12 16:55:35
阅读次数：
105
1.配置Http代理 Port为监听端口号，默认为8888，勾选Enable transparent HTTP proxying，接着勾选SOCKS proxy，可以监听Socks请求 2.安装Charles Root Certificate，路径为Help->SSL Proxying ->Inst ...
分类：
移动开发 时间：
2020-02-12 16:08:20
阅读次数：
176
第一个Fiddler： Fiddler是位于客户端和服务器端的HTTP代理，也是目前最常用的http抓包工具之一 。 它能够记录客户端和服务器之间的所有 HTTP请求，可以针对特定的HTTP请求，分析请求数据、设置断点、调试web应用、修改请求的数据，甚至可以修改服务器返回的数据，功能非常强大，是w ...
分类：
其他好文 时间：
2020-01-31 21:06:36
阅读次数：
105
一、使用代理服务器进行录制 1、创建线程组 2、创建http代理服务器 分组解释 不对样本分组：所有请求全部罗列 在组件添加分隔：加入一个虚拟的以分割线命名的动作 每个组放入一个新的控制器：执行时按控制器给输出结果 只存储每个组的第一个样本：保存对于一次url请求 将每个组放入一个新的事务控制器中 ...
分类：
其他好文 时间：
2020-01-27 22:15:04
阅读次数：
78
代理是爬虫技术中很重要的一项。因为有一些网站会有相应的安全策略。例如检测一段时间内，某个IP地址的访问次数，如果访问频率过高，说明你不是正常访客，然后禁止你这个IP的访问。 应对这种机制有两种手段： 放慢抓取速度，减小对目标网站的访问压力。 设置代理IP，实现高频率抓取，但是这需要多个稳定的代理IP ...
分类：
Web程序 时间：
2020-01-17 11:32:07
阅读次数：
126
fiddler的使用 在使用火狐浏览器进行抓包,需要手动代理配置HTTP代理:172.0.0.1,端口号为8888 fiddler远程操作手机,手机需要更改WLAN→代理→手动→主机名(ip地址)→端口(8888),电脑需要修改tools→connections→选中allow remote com ...
分类：
其他好文 时间：
2020-01-14 12:53:41
阅读次数：
72
问题 为Apache启用mod_proxy做正向代理、反向代理 解决方案 Apache提供了mod_proxy模块用于提供代理服务，能够支持的包括正向代理、反向代理、透明代理、缓存、负载均衡，HTTP代理、FTP代理、SSL代理等若干强大的功能。 通常我们使用的比较多的，是正向代理。也就是在浏览器的 ...
分类：
Web程序 时间：
2020-01-12 22:27:09
阅读次数：
137
