反爬 / 封 IP 对于封 IP 的情况,可以分为几种情况来处理: 首先寻找手机站点、App 站点,如果存在此类站点,反爬会相对较弱。 使用代理,如抓取免费代理、购买付费代理、使用 Tor 代理、Socks 代理等。 在代理的基础上维护自己的代理池,防止代理浪费,保证实时可用。 搭建 ADSL 拨... ...
分类:
其他好文 时间:
2019-01-13 00:14:20
阅读次数:
250
CentOS 7 搭建 TinyProxy 代理 TinyProxy 和 Squid 都是比较优秀的代理软件 TinyProxy比较小众,虽然没有Squid的功能丰富,但是小巧简单,也能满足普通用户的需求。 Squid 是一款优秀的代理软件,有很丰富的ACL管理功能,虽然squid很强大,但配置比较 ...
分类:
其他好文 时间:
2019-01-10 21:44:18
阅读次数:
285
1、proxychains sudo apt-get install proxychains sudo vim /etc/proxychains.conf # proxychains.conf VER 3.1 # # HTTP, SOCKS4, SOCKS5 tunneling proxifier ...
分类:
其他好文 时间:
2019-01-05 19:46:53
阅读次数:
176
代理服务器常用以下端口:(1). HTTP协议代理服务器常用端口号:80/8080/3128/8081/9080(2). SOCKS代理协议服务器常用端口号:1080(3). FTP(文件传输)协议代理服务器常用端口号:21(4). Telnet(远程登录)协议代理服务器常用端口:23 HTTP服务 ...
分类:
其他好文 时间:
2018-12-26 20:04:19
阅读次数:
161
如果想要试用一下socks代理是如何工作的。需要有一个公网IP的服务器作为proxy。目前尝试成功的是在centos7上安装ss5。ss5的config里面的选项是比较专业的,可以参照别人的建议配法。注意,云主机上的防火墙的配置也需要配合起来。 搭建完之后,如果是windows客户端,可以使用 Pr ...
分类:
其他好文 时间:
2018-12-15 13:57:45
阅读次数:
127
tinyproxy代理配置 应用场景: 生产机处于内网,无法直接访问外网,程序安装和漏洞修复等操作需要进行联网操作;通过在办公网(可访问外网)上设置代理服务器,生产机通过代理由办公网访问外网 代理服务器配置 系统:ubuntu tinyproxy安装与配置: 安装: 配置: : 参数 , 对外服务端 ...
分类:
其他好文 时间:
2018-12-10 15:51:34
阅读次数:
398
server.php client.html ...
分类:
Web程序 时间:
2018-12-06 17:53:09
阅读次数:
191
一、异常出现的场景 Spring Cloud内部两个服务A和B,A调用B时,抛出该异常。提示连接拒绝 二、解决方案 这是由于端口无法访问的原因,修改为可用的端口就可以了。 将被调用的服务项目端口修改为其他端口,重新启动就可以了 ...
分类:
Web程序 时间:
2018-11-13 23:53:02
阅读次数:
3927
在Centos7下搭建Socks5代理服务器 知者不言0人评论20237人阅读2017-12-21 09:50:25 采用socks协议的代理服务器就是SOCKS服务器,是一种通用的代理服务器。Socks是个电路级的底层网关,是DavidKoblas在1990年开发的,此后就一直作为Internet ...
分类:
其他好文 时间:
2018-11-07 15:25:21
阅读次数:
301
Description 有$n$只袜子,$k$种颜色,在$m$天中,问最少修改几只袜子的颜色,可以使每天要穿的袜子颜色相同。 Input 第一行$n,m,k$分别对应题目描述。 接下来$m$行每行两个整数$l_i,r_i$表示第$i$天要穿的两只袜子的编号。 Output 一个整数,代表最小要修改几 ...
分类:
其他好文 时间:
2018-11-05 16:14:38
阅读次数:
580