学习地址:http://docs.python-requests.org/zh_CN/latest/user/quickstart.html#id2 使用requests发送网络请求 一、导入requests库 import requests 二、请求 r=requests.get("http:// ...
分类:
编程语言 时间:
2018-10-25 11:07:59
阅读次数:
337
首先,我们需要安装并配置好Python环境,并安装requests和itchat包,我用的是Windows7环境!https://www.python.org/python官网下载然后直接打开安装选择path那个选项勾选(直接添加环境变量以及路径)直接下一步直到安装完成运行cmd然后cmd命令行输入pipinstallitchatrequests等待安装完成现在我们已经安装完成了环境然后在桌面新建
分类:
微信 时间:
2018-10-24 20:11:27
阅读次数:
265
# 基于paramiko模块, pip3 install paramiko import requests import paramiko # ################## 获取今日未采集主机名 ################## #result = requests.get('http:... ...
分类:
编程语言 时间:
2018-10-24 11:58:00
阅读次数:
143
回调函数:一般应用在进程的任务有延时,而要处理的数据时间的很短时,将进程的任务和回调函数绑定起来,将任务获取到的数据返回给回调函数,由回调函数处理数据,回调函数是在主进程中得以执行的 ...
分类:
Web程序 时间:
2018-10-23 22:55:43
阅读次数:
196
(2018-10-15)路2018骞?10鏈?16鏃?8:30鈥斺€?11:00锛屽湪鍏垽涓€搴叕寮€瀹$悊锛氬啀瀹$敵璇?..(2018-10-15)路2018骞?10鏈?16鏃?8:30鈥斺€?11:00锛屽湪鍏垽涓夊涵鍏紑瀹$悊锛氬啀瀹 ...
分类:
编程语言 时间:
2018-10-22 11:34:02
阅读次数:
722
"""爬取豆瓣网站的信息""" import requests from lxml import etree # 请求头设置 headers = { "User-Agentv": "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHT ...
分类:
编程语言 时间:
2018-10-21 19:36:47
阅读次数:
241
最近在练习post请求中上传文件时遇到了一个奇葩事情,两台电脑上写了一模一样的代码,一个运行正常,另一个一片红。 最后了解了一下原因以及解决办法。先记录下关键代码: 代码运行后报错如下: requests.exceptions.SSLError: HTTPSConnectionPool(host=' ...
分类:
编程语言 时间:
2018-10-21 16:04:17
阅读次数:
2320
带参数GET请求 解析json 获取二进制数据 高级操作 文件上传 证书验证 代理认证 请求超时处理 认证设置 1,笔趣阁小说(入门级爬取文本信息) 2,崔庆才博客(伪造头信息爬取策略) ...
分类:
其他好文 时间:
2018-10-21 15:16:00
阅读次数:
352
import re # 引入正则表达式import json # 引入 jsonimport pymongo # 引入mongo数据库import requests # 引入HTTP请求协议from hashlib import md5 # 引入MD5from bs4 import Beautifu... ...
分类:
编程语言 时间:
2018-10-21 13:33:41
阅读次数:
189
这个一个爬去美团的例子,应为数据都是在script中,小心封ip,尽量少运行。 先导入库几个库 发送请求,获取到script里面的数据 然后在利用js2xml方法格式化之后再利用xpath来提取数据 就ok了 ...
分类:
Web程序 时间:
2018-10-21 12:16:10
阅读次数:
212