第十九课预习任务 11.25 配置防盗链11.26 访问控制Directory11.27 访问控制FilesMatch11.28 限定某个目录禁止解析php11.29 限制user_agent11.30/11.31 php相关配置11.32 php扩展模块装安扩展几种限制ip的方法 http://a ...
分类:
其他好文 时间:
2018-09-13 14:28:40
阅读次数:
263
二次筛选原因: 1.利用scrapy配合代理ip爬取企查查手机接口网页,导致网站对反爬更新限制ip访问量。 2.另寻他路编写启信宝手机接口网站爬虫scrapy继续采集第一次未采集和出错的数据。这里还有一些问题就是 这个网站对ip没有限制,程序只要不出错能一直运行,我是直接吧字段拿来放到一个列表里面做... ...
分类:
其他好文 时间:
2018-09-11 21:09:24
阅读次数:
1435
linux限制IP访问ssh 在/etc/hosts.allow输入 (其中192.168.10.88是你要允许登陆ssh的ip,或者是一个网段192.168.10.0/24) sshd:192.168.10.88:allow 在/etc/hosts.deny输入(表示除了上面允许的,其他的ip 都 ...
分类:
其他好文 时间:
2018-08-04 15:43:48
阅读次数:
159
一.背景1.公司等保评级需要对root用户做ip限制,但又不影响其他用户从限制的ip上进行登录2.网上大多的文档都是对用户或者ip进行ssh登录限制,但是限制了ip,其他用户从限制ip上也无法登录,限制了用户登录,但运维平台又有需要root用户登录的情况二.方案解决1.限制root用户密码登录,只允许使用公钥进行登录2.对root用户只开放特定ip进行登录,非开放ip用root用户登录直接拒绝三.
分类:
其他好文 时间:
2018-06-28 12:06:52
阅读次数:
230
一、站点限制IP(多站点统一限IP) vim nginx.conf 二、站点限IP(单站点统一限IP) vim www.XXX.conf 三、单站点限项目访问路径 vim www.XXX.conf ...
分类:
其他好文 时间:
2018-06-11 13:44:44
阅读次数:
362
Apache2.4使用require指令进行访问控制--允许或限制IP访问/通过User-Agent禁止不友好网络爬虫 从Apache2.2升级到Apache2.4后,发现原来用来限制部分IP和垃圾网络爬虫的访问控制规则不起作用,查询后才发现,Apache2.4中开始使用mod_authz_host ...
分类:
Web程序 时间:
2018-06-08 20:39:55
阅读次数:
262
一般需要配置两个server ,listen需要被监听的端口。 第一个如下图,这样,当访问ip的时候就会返回500错误了; 第二个则配置你禁止的ip的域名,如下图 ,这里面配置你的location、upstream等一些其他配置 然后是两个一起的图片 ...
分类:
其他好文 时间:
2018-04-19 17:03:42
阅读次数:
205
4月17日任务11.25配置防盗链11.26访问控制Directory11.27访问控制FilesMatch扩展几种限制ip的方法http://ask.apelearn.com/question/6519apache自定义headerhttp://ask.apelearn.com/question/830apache的keepalive和keepalivetimeouthttp://ask.ape
分类:
其他好文 时间:
2018-04-17 00:28:42
阅读次数:
209
爬虫与反爬 (1) 基本的概念 爬虫: 自动获取网站数据的程序 关键是 定时,定量的,批量的获取 反爬虫: 使用技术手段 防止爬虫程序的方法 存在误伤,即 反爬技术 将普通用户识别为爬虫 如果误伤高 效果再好也不能使用 例子: 比如 限制 ip === 用户的ip 一般都是 局域网内动态分配的, 一 ...
分类:
其他好文 时间:
2018-03-22 11:27:06
阅读次数:
237