1.urlopen参数设置 urlopen(url, data, timeout) import urllib import urllib2 url = 'http://www.server.com/login' user_agent = 'Mozilla/4.0 (compatible; MSIE ...
分类：
其他好文 时间：
2017-05-28 15:26:33
阅读次数：
189
作者写的很有意思拿出来和大家分享 作者：Shadow链接：https://www.zhihu.com/question/19553117/answer/114306637来源：知乎著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。 你是否好奇标识浏览器身份的User-Agent，为 ...
分类：
其他好文 时间：
2017-05-25 18:17:31
阅读次数：
814
命令：curl在Linux中curl是一个利用URL规则在命令行下工作的文件传输工具，可以说是一款很强大的http命令行工具。它支持文件的上传和下载，是综合传输工具，但按传统，习惯称url为下载工具。 语法：# curl [option] [url] 常见参数：-A/--user-agent <st ...
分类：
Web程序 时间：
2017-05-25 13:38:48
阅读次数：
162
Http请求 POST /index.php HTTP/1.1 //请求行 Host:www.hello.com //请求头 user-Agent:Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) ...
分类：
Web程序 时间：
2017-05-23 13:17:03
阅读次数：
149
实现的原理,是检測浏览器的 USER-AGENT 这个header,然后依据正則表達式来确定client类型。 假设都不匹配，Fallback回退策略是显示相应的页面。让用户自己选择。 适合採用二维码扫描方式下载APP： JSP版本号的代码例如以下所看到的:其它服务端版本号请百度搜索。 原帖地址: ...
分类：
移动开发 时间：
2017-05-18 18:42:27
阅读次数：
248
命令：curl在Linux中curl是一个利用URL规则在命令行下工作的文件传输工具，可以说是一款很强大的http命令行工具。它支持文件的上传和下载，是综合传输工具，但按传统，习惯称url为下载工具。 语法：# curl [option] [url] 常见参数：-A/--user-agent <st ...
分类：
Web程序 时间：
2017-05-14 14:53:12
阅读次数：
262
有user agent stylesheet样子 正常样子 经过chrome查看样式，发现多出了一个user agent stylesheet样式，覆盖了原来样式 经查询，原来user agent stylesheet是浏览器自带样式； 通过与前面正常文件对比，发现自己少了一句代码，我适当加上 <! ...
分类：
其他好文 时间：
2017-05-13 09:55:27
阅读次数：
202
1 #requests+正则表达式爬取ip 2 #findall方法，如果表达式中包含有子组，则会把子组单独返回出来，如果有多个子组，则会组合成元祖 3 import requests 4 import re 5 def get_ip(url): 6 headers={'User-Agent':'M... ...
分类：
其他好文 时间：
2017-05-13 00:35:59
阅读次数：
286
如图 两个div之间总是有一个空行，设置了margin为0还是没卵用，f12调试发现 多了一个user agent stylesheet样式，经百度是浏览器自带的样式 重新为div内的元素ul设置css样式，margin为0，覆盖其原有的属性 参考文章：http://blog.csdn.net/ga ...
分类：
其他好文 时间：
2017-05-11 20:28:44
阅读次数：
167
利用bs库进行爬取，在下载html时，使用代理user_agent来下载，并且下载次数是2次，当第一次下载失败后，并且http状态码是500-600之间，然后会重新下载一次 ...
分类：
编程语言 时间：
2017-05-11 00:16:03
阅读次数：
240
