码迷,mamicode.com
首页 >  
搜索关键字:requests    ( 4533个结果
python爬取主播信息
之前学过python的爬虫技术,现在回顾一下看看还会不会,果然有坑。先爬取了微博评论网友的id代码如下importrequestsurl=‘https://m.weibo.cn/api/comments/show?id=4188633986790962&page=6h=requests.get(url)print(h.json()[‘data‘][‘data
分类:编程语言   时间:2019-03-26 19:41:10    阅读次数:437
requests模块
``` import requests # GET请求 url = 'http://httpbin.org/get' r = requests.get(url) print(r.status_code,r.reason) print(r.text) # GET带参数请求 r = requests.g... ...
分类:其他好文   时间:2019-03-26 15:15:37    阅读次数:155
浅析Python进行接口自动化
python进行接口自动化需要依赖于requests库,首先如果没有下载该库,使用pip进行下载到本地:1.进入D:\软件安装文件夹\PYTHON\Scripts目录下(ps:这个看个人安装python位置),使用cmd进入命令界面,输入pipinstallrequests,完成后即可使用参考示例:期间自己调测可以使用fiddler抓包进行调试,后面再研究使用unitest测试框架进行校验等
分类:编程语言   时间:2019-03-26 12:04:03    阅读次数:157
Fatal error in launcher: Unable to create process using '"'
一、问题 在windows10上通过pip安装requests报错 二、解决办法 前面加 这里提示pip需要更新,我们执行 命令更新: 更新成功后,再执行 ,发现已经OK了,可以直接跑了。 ...
分类:其他好文   时间:2019-03-26 11:57:21    阅读次数:267
vue页面嵌套其他页面判断是否生产https
if (location.protocol.indexOf('https') > -1) { var oMeta = document.createElement('meta'); oMeta.content = 'upgrade-insecure-requests'; oMeta.httpEqui... ...
分类:Web程序   时间:2019-03-26 10:38:58    阅读次数:302
python requests post和get
import requests import time import hashlib import os import json from contextlib import closing import datetime def md5_passwd(str,salt=''): str=str+s... ...
分类:编程语言   时间:2019-03-25 19:03:17    阅读次数:234
理解爬虫原理
1. 简单说明爬虫原理 a.向服务器发起请求 b.获取响应内容 c.解析内容 d.保存内容 2. 理解爬虫开发过程 1).简要说明浏览器工作原理; 输入url,发送请求,通过网络连接,等待服务器相应返回数据,浏览器出现界面 2).使用 requests 库抓取网站数据; requests.get(u ...
分类:其他好文   时间:2019-03-25 17:53:48    阅读次数:151
python 多版本共存
# coding=utf-8# URL:https://www.python.org/downloads/ __author__ = "Chen"__version__ = "python2.x and python3.x" """假设现在需要多版本python共存,python2.x用来空间数据主 ...
分类:编程语言   时间:2019-03-24 09:52:10    阅读次数:145
sqli-labs:1-4,基于报错的注入
sqli1: 脚本 1 # -*- coding: utf-8 -*- 2 """ 3 Created on Sat Mar 23 09:37:14 2019 4 5 @author: kenshin 6 """ 7 8 import requests,re 9 url = 'http://loca ...
分类:数据库   时间:2019-03-23 16:06:39    阅读次数:232
bibli直播弹幕实时爬取
1 分析数据来源 在不知道弹幕信息在哪里的时候,只能去all里面查看每一个相应的信息,看信息是否含有弹幕信息 在知道弹幕信息文件的时候,我们可以直接用全局文件搜索,定位到弹幕数据文件.操作如下图 2 查看文件的请求信息 3 查看请求头信息,构建请求头 请求头; 请求体数据 4 代码 5 效果 ...
分类:其他好文   时间:2019-03-22 18:58:55    阅读次数:458
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!