1.工具 1.电脑版微信客户端window版本(1.x.x 亲测可以在谷歌浏览器进行微信授权登录,版本越来越好)或者用微信开发工具。很久之前就是用这个方法搞定用chrome进行微信登录授权。 2.user agent:插件 设置成微信代理模式 3.natapp https://natapp.cn ( ...
分类:
微信 时间:
2018-05-02 16:03:30
阅读次数:
248
1.爬虫流程图 2.简单爬虫整个网页的内容 --python2 3.中文乱码处理 4. 伪装请求【伪装成浏览器】User-Agent头 5. 解析网页内容 5.1 正则 import re 创建正则表达式对象:pattern = re.comple(' \d+\.\d+ ', re.S) 默认匹配没 ...
分类:
其他好文 时间:
2018-04-29 15:25:32
阅读次数:
220
请求头 : GET / HTTP/1.1 这两行比较重要 GET /classic.css HTTP/1.1 Host: 127.0.0.1:8997 Connection: keep-alive User-Agent: Mozilla/5.0 (X11; Linux x86_64) AppleWe... ...
分类:
Web程序 时间:
2018-04-27 02:30:59
阅读次数:
304
log_format weparts '$remote_addr [$time_iso8601] $request - $status "$http_user_agent" $body_bytes_sent $request_time';server { listen 80; server_name ...
分类:
其他好文 时间:
2018-04-24 13:56:54
阅读次数:
121
微信: user agent: Mozilla/5.0 (iPhone; CPU iPhone OS 10_3_3 like Mac OS X) AppleWebKit/603.3.8 (KHTML, like Gecko) Mobile/14G60 MicroMessenger/6.6.1 Net ...
分类:
其他好文 时间:
2018-04-23 16:36:47
阅读次数:
652
scrapy 伪装代理和fake_userAgent的使用 伪装浏览器代理 在爬取网页是有些服务器对请求过滤的不是很高可以不用ip来伪装请求直接将自己的浏览器信息给伪装也是可以的。 第一中方法: 1.在setting.py文件中加入以下内容,这是一些浏览器的头信息 USER_AGENT_LIST = ...
分类:
编程语言 时间:
2018-04-23 15:42:39
阅读次数:
243
lamp 学习即将到尾声,内容挺多的,我们要好好理解其中的应用场景。
分类:
Web程序 时间:
2018-04-19 12:05:22
阅读次数:
238
禁止php解析对于使用php语言编写的网站,有一些目录是需要上传文件的,如果网站有漏洞,让黑客上传了一个用php代写的木马,由于网站可以执行php程序,最终会让黑客拿到服务器权限,为了避免这种情况发生,我们需要把能上传文件的目录直接禁止解析php代码。<Directory/data/wwwroot/111.com/upload>php_admin_flagengineoff<Fi
分类:
Web程序 时间:
2018-04-19 00:31:08
阅读次数:
215
解决办法: 修改url为手机版的地址:http://fanyi.baidu.com/basetrans User Agent也用手机版的 测试代码: 返回结果: ...
分类:
编程语言 时间:
2018-04-18 23:46:08
阅读次数:
5522
import re,requests,xlwt from lxml import etree headers = { 'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Ch... ...
分类:
其他好文 时间:
2018-04-18 14:24:15
阅读次数:
228