#工具函数,整体测试不行 import requests import time ''' def get_html(url): # 代理服务器 print("开始下载url : {}".format(url)) proxyHost = "http-dyn.abuyun.com" proxyPort ...
分类:
其他好文 时间:
2020-07-13 09:30:45
阅读次数:
69
# -*- codeing = utf-8 -*- # @Time : 2020/7/9 16:43 # @Author: 小菜菜最菜 # @File : douban.py # @Software : PyCharm from bs4 import BeautifulSoup# 网页解析,获取数据 ...
分类:
其他好文 时间:
2020-07-12 22:30:01
阅读次数:
102
Python爬取博客的所有文章并存为带目录的word 文档##### import requests from bs4 import BeautifulSoup url = f'http://blog.sina.com.cn/s/articlelist_5119330124_0_1.html' wb ...
分类:
编程语言 时间:
2020-07-12 18:40:55
阅读次数:
75
代码如下: python fofa.py -s=title="你的关键字" -o="结果输出文件" -c="你的cookie" 代码如下: import requests,time,base64,fire from lxml import etree def fofasc(s,o,c): try: ...
分类:
编程语言 时间:
2020-07-12 16:27:23
阅读次数:
106
修复前self.r =requests.post(url,params=params,headers=headers,timeout=Interface_Time_Out)修复后self.r =requests.post(url,data=params,headers=headers,timeout ...
分类:
编程语言 时间:
2020-07-12 00:57:06
阅读次数:
521
前言: session:用requests.session()创建会话,可以将会话信息传递给其他接口 cookie:用RequestsCookieJar或者cookie字典传递cookie信息 fildder请求响应内容: 代码: import requests from requests.cook ...
分类:
其他好文 时间:
2020-07-11 19:36:16
阅读次数:
65
Ruquest基础使用(一) 简介 Requests 唯一的一个非转基因的 Python HTTP 库,人类可以安全享用。 警告:非专业使用其他 HTTP 库会导致危险的副作用,包括:安全缺陷症、冗余代码症、重新发明轮子症、啃文档症、抑郁、头疼、甚至死亡。 安装 1、在线联网安装 在CMD中输入执行 ...
分类:
其他好文 时间:
2020-07-11 11:17:16
阅读次数:
97
import requestsimport timeimport reimport os"""歌手字典"""song_dict = {}def song_static(): """采集静态页面url和歌手""" try: response = requests.get('http://www.9ku ...
分类:
Web程序 时间:
2020-07-11 11:16:32
阅读次数:
105
""" 抓取 解析 存储 """ import re #import ast from urllib import parse from datetime import datetime import random import requests import time import redis f ...
分类:
移动开发 时间:
2020-07-10 19:13:28
阅读次数:
79
from bs4 import BeautifulSoup from bs4 import Comment html_doc = """ <html><head><title>The Dormouse's story</title></head> <body> <p class="title"><b ...
分类:
编程语言 时间:
2020-07-10 18:55:06
阅读次数:
57