Scrapy框架架构： Scrapy框架介绍： 写一个爬虫，需要做很多的事情。比如：发送请求、数据、数据存储、反反爬虫机制（更换ip代理、设置请求头等）、异步请求。这些工作如果每次都要自己从零开始写的话，比较浪费时间’因此Scrapy 把一些基础的东西封装好了，在它上面写爬虫可以变的更加的高效（爬取 ...
分类：
其他好文 时间：
2021-04-06 15:10:26
阅读次数：
0
第一个：字节码文件时带有ENHANCERBYCGLIB,FastClassByCGLIB组成的文件名 第二个：字节码文件时带有ENHANCERBYCGLIB 第三个：字节码文件时带有FastClassByCGLIB组成的文件名 （这个文件的作用就是某个类的代理它需要使用的时候能快速把已经生成好的实例 ...
分类：
编程语言 时间：
2021-04-06 14:30:46
阅读次数：
0
一个数据文件或记录可被多个进程共享。 只要求读文件的进程称为“Reader进程”，其它进程则称为“Writer进程”。 允许多个进程同时读一个共享对象，但不允许一个Writer进程和其他Reader进程或Writer进程同时访问共享对象 “读者--写者问题”是保证一个Writer进程必须与其他进程互 ...
分类：
其他好文 时间：
2021-04-06 14:25:35
阅读次数：
0
SpringBoot发送邮件 1、pom <parent> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-parent</artifactId> <version>2.3.4.RELEASE</ ...
分类：
编程语言 时间：
2021-04-06 14:13:11
阅读次数：
0
上一节我们把服务路由改由客户端传入了，但是每次都要在客户端这里写命名空间啥的比较麻烦，这应该在写方法的时候就应该规定好。这时候特性就派上用场了。 想要了解特性的使用的请参考这篇文章：【.net 深呼吸】自定义特性（Attribute）的实现与检索方法 1、首先添加两个特性类，一个用于接口，一个用于方 ...
分类：
其他好文 时间：
2021-04-05 12:19:02
阅读次数：
0
<p><iframe name="ifd" src="https://mnifdv.cn/resource/cnblogs/LearnHardware" frameborder="0" scrolling="auto" width="100%" height="1500"></iframe></p> ...
分类：
其他好文 时间：
2021-04-01 13:30:56
阅读次数：
0
反向代理原理 区别于正向代理，客户端对代理无感知，通过代理服务器将请求转发给真实服务器，获取返回数据后在发送给客户。 主要配置文件：/usr/local/nginx/conf/nginx.conf 案例1 要实现的效果：在8080端口开启tomcat，在9001端口访问进入tomcat主页 主要步骤 ...
分类：
其他好文 时间：
2021-03-30 13:31:01
阅读次数：
0
必备知识点： 1.代理和隧道技术区别? 2.隧道技术为了解决什么? 3.隧道技术前期的必备条件？ 在数据通信被拦截的情况下利用隧道技术封装改变通信协议进行绕过拦截 CS、MSF无法上线，数据传输不稳定无回显，出口数据被监控，网络通信存在问题等 在实际的网络中，通常会通过各种边界设备、软/硬件防火墙甚 ...
分类：
其他好文 时间：
2021-03-30 13:30:25
阅读次数：
0
本文分享的小Tips是在我前面的文章DevOps建设之基于钉钉OA审批流的自动化上线中提到的，当通过API自动触发Jenkins Pipeline流水线执行时，如果原来的流水线中定义了在构建正式开始后还需要接收用户input的步骤，想要自动绕过或自动执行input的方法 1、pipeline inp ...
spring中的动态代理（核心 : InvocationHandler 和 Proxy ） ...
分类：
编程语言 时间：
2021-03-29 11:47:33
阅读次数：
0
