前序 最近在研究反爬虫策略，写了一个大众点评评论采集的程序，途中遇到了一些坑有感而发分享给大家，大众点评是基于css机制实现的字体加密技术来阻碍我的进行准确数据的抓取 正文 图1 根据图1我们可以看出部分文字在源码中是无法得到正常显示的，对应的我们解析也只能得到一些无用的svg标签,且又由于文字本身 ...
分类：
编程语言 时间：
2020-09-04 17:42:55
阅读次数：
70
作者：李毓在正常情况下，控制台输入kubectltoppods命令，会返回如下提示：[root@adm-master~]#kubectltoppodsErrorfromserver(NotFound):theservercouldnotfindtherequestedresource(getserviceshttp:heapster:)这是因为还缺少个组件，这个组件叫做metric-server。
分类：
其他好文 时间：
2020-08-20 18:27:51
阅读次数：
67
项目打成war包部署在tomcat，然后404页面放在了静态资源下，文件是utf-8格式，查看编译后的文件也是utf-8，并且能直接显示，但资源就是乱码，最后发现响应信息并不是utf-8 response headers Content-Type: text/html;charset=ISO-885 ...
分类：
Web程序 时间：
2020-08-20 18:23:15
阅读次数：
90
txt文件 生成并下载txt文件： @app.route('/download', methods=['GET']) def download(): content = "long text" response = make_response(content) response.headers["C ...
分类：
编程语言 时间：
2020-08-19 19:59:30
阅读次数：
79
1.Flask路由 1.1 定义路由 from flask import Flask app = Flask(__name__) # 1.路由对应的URL必须以/开头 # 2.通过app的url_map属性获取所有的路由规则 (URL资源段 支持的请求方式 视图函数标记) # 3.可以通过route ...
分类：
其他好文 时间：
2020-08-17 17:18:57
阅读次数：
67
上次内容总结 requests作用：模拟浏览器发起请求 urllib：requests的前身 requests模块的编码流程： 指定url 发起请求： get（url,params,headers） post（url,data,headers） 获取响应数据 持久化存储 参数动态化： 有些情况下我们 ...
分类：
其他好文 时间：
2020-08-10 10:52:28
阅读次数：
64
报错HttpConnectinPool:原因： 1.短时间内发起了高频的请求导致ip被禁。 2.发送高频的请求且请求成功后没有被及时断开，导致http连接池（http连接对象）中的连接资源被耗尽。 解决： 1.代理 2.headers中加入Conection:"close"，表示请求后连接立即断开。 ...
分类：
其他好文 时间：
2020-08-09 21:33:20
阅读次数：
96
bevol 平台爬取 import requests import time import os import openpyxl class Base_params: @property def headers(self): """ headers :return:headers """ retur ...
分类：
移动开发 时间：
2020-08-02 16:16:36
阅读次数：
130
[GKCTF2020]cve版签到 题目提示 cve-2020-7066 Hint: Flag in localhost Tips: Host must be end with '123' You just view *.ctfhub.com 题目原型 #79329 get_headers() si ...
分类：
Web程序 时间：
2020-08-01 21:18:34
阅读次数：
154
具体代码如下： import requests import re headers = {'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/74. ...
分类：
其他好文 时间：
2020-07-29 21:39:19
阅读次数：
106
