限定某个目录禁止解析php、限制user_agent、PHP相关配置
分类：
Web程序 时间：
2018-04-18 11:42:44
阅读次数：
214
public function isMobile(){ $useragent=isset($_SERVER['HTTP_USER_AGENT']) ? $_SERVER['HTTP_USER_AGENT'] : ''; $useragent_commentsblock=preg_match('|\(... ...
分类：
移动开发 时间：
2018-04-18 11:39:09
阅读次数：
202
11.21Apache访问日志访问日志访问日志记录用户的每一个请求vim/usr/local/apache2.4/conf/httpd.conf//搜索LogFormatLogFormat"%h%l%u%t\"%r\"%>s%b\"%{Referer}i\"\"%{User-Agent}i\""combinedLogFormat"%h%l%u%t\"%r\"%>s%b"common修改
分类：
系统相关 时间：
2018-04-16 21:10:28
阅读次数：
279
import requests from bs4 import BeautifulSoup import time headers={ #'User-Agent':'Nokia6600/1.0 (3.42.1) SymbianOS/7.0s Series60/2.0 Profile/MIDP-2.0... ...
分类：
其他好文 时间：
2018-04-16 16:18:20
阅读次数：
172
我觉得这里主要知识点在域名跳转的rewrite 规则里，要理解里面正则，还有就是几个概念要理解，比如 referer , user-agent,下一篇会讲到。
分类：
系统相关 时间：
2018-04-15 17:15:42
阅读次数：
178
#-*-coding:utf-8-*- import urllib import urllib2 import re def get_duanzi(url): store=[] user_agent='Mozilla/5.0 (Windows NT 10.0; WOW64)' headers={'U... ...
分类：
编程语言 时间：
2018-04-14 12:33:11
阅读次数：
218
浏览器User Agent的详细信息 PC端： safari 5.1 – MAC User Agent:Mozilla/5.0 (Macintosh; U; Intel Mac OS X 10_6_8; en us) AppleWebKit/534.50 (KHTML, like Gecko) Ve ...
分类：
Web程序 时间：
2018-04-10 10:50:17
阅读次数：
367
1. cookies 2. changing the user agent [firefox, ] 3. drag and drop ...
分类：
其他好文 时间：
2018-04-03 21:58:15
阅读次数：
115
反爬虫 的技术大概分为四个种类： 注：文末有福利！ 一、通过User-Agent来控制访问： 无论是浏览器还是爬虫程序，在向服务器发起网络请求的时候，都会发过去一个头文件：headers，比如知乎的requests headers: 这里面的大多数的字段都是浏览器向服务器”表明身份“用的对于爬虫程序 ...
分类：
其他好文 时间：
2018-04-01 18:50:36
阅读次数：
216
请求报文POST/cgi-bin/httpconnHTTP/1.1POST：请求地址Host:111.161.64.121HOST：主机头Accept:/Accept:accept属性User-Agent:Mozilla/4.0(compatible;MSIE6.0;WindowsNT5.1)U-A：客户端类型Connection:Keep-Aliveconnection::keep-Alive持
分类：
Web程序 时间：
2018-03-30 10:47:46
阅读次数：
370
