一、反爬策略 1、请求头 ——user-agent ——referer ——cookie 2、访问频率限制 ——代理池 ——再用户访问高峰期进行爬取，冲散日志。12-13 7-10 ——设置等待时长。time.sleep(3) 3、ajax异步请求，用接口获取数据 4、能一次性获取的数据，绝不发送第 ...
分类：
编程语言 时间：
2019-12-22 20:24:50
阅读次数：
127
会话技术 http协议是无状态协议。为了满足在多次请求之间数据进行交互，推出了会话技术。 概念 会话： 一次会话，指的是从客户端和服务器建立起连接开始，到客户端或服务器断开连接为止。中间可能进行多次的请求和响应的过程。 分类 根据存储位置的不同，我们把会话技术分为两类。 客户端会话技术： Cooki ...
分类：
Web程序 时间：
2019-12-22 11:10:51
阅读次数：
99
一：Nginx基础概述 1.Nginx简述 Nginx是一个开源且高性能、可靠的Http Web服务、代理服务。 开源: 直接获取源代码 高性能: 支持海量并发 可靠: 服务稳定 2.为什么选择Nginx服务 1.1 Nginx非常轻量 功能模块少 (源代码仅保留http与核心模块代码,其余不够核心 ...
分类：
其他好文 时间：
2019-12-21 22:17:59
阅读次数：
101
JMeter测试工具 需要创建一个心的工程； 添加一个线程组—这里面设置秒级并发数； 添加一个请求—这里设置压力测试的接口；参数使用: 可以从csv文件中获取数据 请求头管理—添加需要修改的请求头信息； CSV文件—可以将请求的参数，以变量的形式，从csv文件中获取，模拟多种请求数据； 具体怎么用， ...
分类：
其他好文 时间：
2019-12-21 20:36:20
阅读次数：
91
只获取请求头 每次SSL连接curl都需要验证是否安全。 参数表示如果不安全也可以继续操作。 告诉curl只使用ipv4地址 告诉curl只使用ipv6 设置时间保持心跳连接 不设置心跳保持连接 (FTP)当列出FTP文件夹时，该选项强制只列出名字 表明curl可一次性发送多个请求。例子： 不使用输 ...
分类：
Web程序 时间：
2019-12-20 20:33:21
阅读次数：
104
路径参数 查询字符串：request.GET（字典） 请求体（表单类型）：request.POST（字典） 请求体（非表单类型）：request.body（字节） 请求头：request.META 其他常用HttpRequest对象属性 method：一个字符串，表示请求使用的HTTP方法，常用值包 ...
分类：
其他好文 时间：
2019-12-19 23:24:55
阅读次数：
169
在之前做一个4s店维修管理系统时，登录权限用到了shiro框架， 在前后端分离的情况下，登录成功后，后台会向前台传个token回来， 前端的session会记录登录用户的所有信息， 每当前端向后台发送axios请求时都会携带个token传向后台， //发送请求之前拦截下来,在请求头里面 添加上 X- ...
分类：
Web程序 时间：
2019-12-19 21:42:47
阅读次数：
133
该文章主要介绍面对AJAX的网页如何爬去信息，主要作用是适合刚入门爬虫查看学习 ...
分类：
编程语言 时间：
2019-12-19 13:25:53
阅读次数：
97
发起请求报错：org.springframework.http.converter.HttpMessageNotReadableException 查看请求头： application/json 所以post请求 data ： 需要 data = json.dumps(data)resp = req ...
分类：
编程语言 时间：
2019-12-18 19:04:05
阅读次数：
116
1.健康检测exec探测apiVersion:v1kind:Podmetadata:name:liveness-execspec:containers:-name:liveness-demoimage:busyboxargs:#容器初始化执行的命令-/bin/sh--c-touch/tmp/healthy;sleep10;rm-rf/tmp/healthy;sleep600#表示，容器一运行就创建
分类：
Web程序 时间：
2019-12-18 09:24:25
阅读次数：
146
