码迷,mamicode.com
首页 > 编程语言 > 详细

python爬虫requests过程中添加headers

时间:2017-07-29 10:06:31      阅读:179      评论:0      收藏:0      [点我收藏+]

标签:ges   python   window   out   页面   word   bsp   timeout   zha   

浏览器中打开页面,以edge为例,点击“查看源”或F12

技术分享

第一步:点击上图中“网络”标签,然后刷新或载入页面

第二步:在右侧“标头”下方的“请求标头”中的所有信息都是headers内容,添加到requests请求中即可

代码示例如下:

headers = {Accept: text/html, application/xhtml+xml, image/jxr, */*,
               Accept - Encoding:gzip, deflate,
               Accept-Language:zh-Hans-CN, zh-Hans; q=0.5,
               Connection:Keep-Alive,
               Host:zhannei.baidu.com,
               User-Agent:Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36 Edge/15.15063}
r = requests.get(http://zhannei.baidu.com/cse/search, params=keyword, headers=headers, timeout=3)

 

python爬虫requests过程中添加headers

标签:ges   python   window   out   页面   word   bsp   timeout   zha   

原文地址:http://www.cnblogs.com/stuqx/p/7253321.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!