2.5 代理的基本原理 我们在做爬虫的过程中经常会遇到这样的情况，最初爬虫正常运行，正常抓取数据，一切看起来都是那么美好，然而一杯茶的功夫可能就会出现错误，比如 403 Forbidden，这时候打开网页一看，可能会看到 “您的 IP 访问频率太高” 这样的提示。出现这种现象的原因是网站采取了一些反 ...
分类：
其他好文 时间：
2020-07-17 13:47:43
阅读次数：
53
之前看了一些互联网公司的测试经验和技术介绍。最近又翻出来重新看了一遍，感触还是挺多的，可能也是由于工作时间长了后有了一些新的感悟。主要有百度，腾讯，阿里下属的几个子公司，内容比较杂，有介绍测试经验和测试技术的，也有介绍自己的测试工具和自动化平台的。总结了一下，主要优点体现在以下几个方面：第一，尽早测 ...
分类：
其他好文 时间：
2020-07-17 11:37:13
阅读次数：
123
Jmeter 中BeanShell 中支持JAVA语言，可以使用Java来辅助我们实现一些逻辑，之前也介绍过BeanShell 导入Java的三种模式，如果我们不会写Java怎么办（虽然我们遇见的一些问题可以通过百度查询到结果），但是我们是否可以转换下思路来解决这样的问题，比如使用比较熟悉的语言例如 ...
分类：
编程语言 时间：
2020-07-16 22:05:09
阅读次数：
116
善于记录，善于总结——《走出软件作坊》读后感_思考，行动，再思考，再总结-CSDN博客_走出软件作坊 心得 https://blog.csdn.net/philofly/article/details/6567462 走出软件作坊_百度百科 https://baike.baidu.com/item/ ...
分类：
其他好文 时间：
2020-07-16 22:04:14
阅读次数：
116
IntelliJ IDEA 启动一个之前运行正常的项目失败，报错是： java.lang.OutOfMemoryError : GC overhead limit exceeded 百度了一下，说是 IntelliJ IDEA 设置的内存太小，需要设置大一点。修改完成后，果然可以运行了，这里记录一下 ...
分类：
编程语言 时间：
2020-07-16 21:48:15
阅读次数：
310
概述 SSRF(Server-Side Request Forgery:服务器端请求伪造)其形成的原因大都是由于服务端提供了从其他服务器应用获取数据的功能,但又没有对目标地址做严格过滤与限制，导致攻击者可以传入任意的地址来让后端服务器对其发起请求,并返回对该目标地址请求的数据。数据流:攻击者 >服务 ...
分类：
其他好文 时间：
2020-07-16 21:31:26
阅读次数：
79
借鉴Kr1s77大佬的爬虫资料，GitHbub链接：https://github.com/Kr1s77/awesome-python-login-model 整理一下，给自己学习爬虫使用 001.百度贴吧 # 是告诉操作系统执行这个脚本的时候，调用/usr/bin下的python3解释器； # !/ ...
分类：
其他好文 时间：
2020-07-16 18:25:37
阅读次数：
139
网站的加载速度不仅影响着用户体验，也会影响搜索引擎的排名，在百度推出“闪电算法”以来，将网站首屏打开速度被列入优化排名行列，并明确指定打开时间为 2 秒。作为前端开发的我们需要如果来优化网站的打开速度呢？下面就整理挖掘出很多细节上可以提升性能的东西分享给大家 优化网站性能的14条规则： 1. 尽可能 ...
分类：
Web程序 时间：
2020-07-16 18:07:52
阅读次数：
82
几种知名开源富文本编辑器记录和对比（仅供参考） 搬运出处: https://www.jianshu.com/p/002eb6277f9d 1、UEditor 百度的。 优点：插件多，基本满足各种需求，类似贴吧中的回复界面。 缺点：不再维护，文档极少，使用并不普遍，图片只能上传到本地服务器，如果需要上 ...
分类：
其他好文 时间：
2020-07-16 12:18:05
阅读次数：
55
过去几年，以docker、kubernetes为代表的容器技术已发展为一项通用技术，BAT、滴滴、京东、头条等大厂，都争相把容器和k8s项目作为技术重心，试图“放长线钓大鱼”。就说阿里吧，目前基本所有业务都跑在云上，其中有一半已迁移到自己定制kubernetes集群上。据说，今年计划完成100%基于k8s集群的业务部署。而服务网格这块儿，在阿里的一些部门（比如蚂蚁金服），已经有线上业务在用了。这充
分类：
Web程序 时间：
2020-07-16 12:16:20
阅读次数：
285
