问题情景: scrapy爬取网页,返回值418(按照请求来说,是一个完整的网络请求)。说明此接口已经被后台爬虫检测程序检测到了。 通过研读scrapy文档,在自定义的418检测下载中间件里面,process_response中检测返回值,并设置request的http/https代理,然后retur ...
分类:
其他好文 时间:
2020-07-08 19:36:11
阅读次数:
66
--dns-servers 是复数,主要用于内部架设的dns服务器,外部dns无法解析.-Pn Treat all hosts as online skip host discovery 明确知道主机存活或防火墙开启的机器,-Pn不启用探测前的ICMP请求,达到不触发防火墙的安全机制 -F fast ...
分类:
其他好文 时间:
2020-07-08 09:14:15
阅读次数:
71
今天在Spring Boot项目中使用JPA(Hibernate)进行数据库访问时, spring: jpa: generate-ddl: false show-sql: true hibernate: ddl-auto: none open-in-view: true 查询一个实体对象时出现异常: ...
分类:
Web程序 时间:
2020-07-08 00:59:55
阅读次数:
111
JSTL标签用法 详解 在JSP的开发中,迭代是经常要使用到的操作。例如,逐行的显示查询的结果等。在早期的JSP中,通常使用Scriptlets来实现Iterator或者Enumeration对象的迭代输出。现在,通过JSTL的迭代标签可以在很大的程度上简化迭代操作。 JSTL所支持的迭代标签有两个 ...
分类:
Web程序 时间:
2020-07-07 00:11:06
阅读次数:
68
webpack常用的插件安装命令:1:npm install html-webpack-plugin --save-dev //自动快速的帮我们生成HTML。2:npm install css-loader style-loader --save-dev//样式文件,我们需要两种loader,css ...
分类:
Web程序 时间:
2020-07-06 10:35:58
阅读次数:
84
Session List · Fiddler 抓取到的每条http请求(每一条称为一个Session) · 主要包含了请求的ID编号、状态码、协议、主机名、URL、内容类型、 body大小、进程信息、自定义备注信息 自定义添加列(在列表栏右键) 命令行 输入help回车进入fiddler命令行帮助文 ...
分类:
其他好文 时间:
2020-07-06 00:45:00
阅读次数:
128
SQL语言大致分为`DCL`、`DDL`、`DML`三种,本文主要介绍`MySQL 5.7`版本的`DCL`语句。 ...
分类:
数据库 时间:
2020-07-05 23:11:17
阅读次数:
76
问题最近心血来潮把mac版本升级了下,然后就发现我写的登录SSH的脚本 无法登录服务器了。一开始以为是dns出问题了,但是单独 ping 域名 ip 却是对的,我就非常郁闷了。但是由于比较忙一直就没有在乎这个问题,今天上网搜索了下发现有人遇到同样的问题,原来是 mac 升级之后的一个Bug、Bug、... ...
分类:
系统相关 时间:
2020-07-05 17:04:52
阅读次数:
102
1. 支持向量机(Support Vector Machine, SVM): 一种知名的二元线性/非线性分类方法,由俄罗斯的统计学家Vapnik等人所提出。它使用一个非线性转换(Nonlinear Transformation)将原始数据映像(Mapping)至较高维度的特征空间 (Feature ...
分类:
其他好文 时间:
2020-07-05 15:28:57
阅读次数:
70
在前面的1主2从架构中Redis 主从架构实践 CentOS 64-bit-basic 192.168.127.130 redis(主) CentOS 64-bit 192.168.127.128 redis(从) CentOS 64-bit_2 192.168.127.129 redis(从) 如 ...
分类:
其他好文 时间:
2020-07-05 00:41:32
阅读次数:
118