文章目录 前言 网络爬虫 搜索引擎 爬虫应用 谨防违法 爬虫实战 网页分析 编写代码 运行效果 反爬技术 前言 很多人学习python,不知道从何学起。很多人学习python,掌握了基本语法过后,不知道在哪里寻找案例上手。很多已经做案例的人,却不知道如何去学习更加高深的知识。那么针对这三类人,我给大 ...
分类:
编程语言 时间:
2020-09-14 19:03:47
阅读次数:
48
昨天发现线上试跑期的一个程序挂了,平时都跑的好好的,查了下日志是因为昨天运营跑了一家美妆top级淘品牌店,会员量近千万,一下子就把128G的内存给爆了,当时并行跑了二个任务,没辙先速写一段代码限流,后面再做进一步优化。一:背景1.背景介绍因为是自己写的代码,所以我知道问题出现在哪里,如果大家看过我之前写的文章应该知道我用全内存跑了很多模型对用户打标签,一个模型就是一组定向的筛选条件,而为了加速处理
分类:
其他好文 时间:
2020-09-11 14:19:07
阅读次数:
33
springboot处理Web静态资源 以前的JavaWeb/maven(war形式)项目都是把静态资源放在webapps/WebContent目录下,然后把JavaWeb项目打包成war包,那现在的springboot都是jar包形式,那么静态资源放在哪里? springboot是通过WebMvc ...
分类:
编程语言 时间:
2020-09-09 18:48:10
阅读次数:
39
一、实现思想 平衡二叉树比二叉查找树升级在哪里? 平衡二叉树是在二叉查找树的属性『左小右大』的基础上做一个调整,确保每一个节点的左右子树高度差不大于1,这样在运用『左小右大』进行查找时,就可以一下子排除许多数。最直观的,平衡二叉树就不会有像二叉查找树那样一边倒的例子。 如何确保每个节点的左右子树高度 ...
分类:
其他好文 时间:
2020-09-07 19:09:38
阅读次数:
57
文章目录 一、实现效果 1. python代码 2. 运行效果 二、基本思路 1. 爬虫部分 2. tkinter界面 一、实现效果 很多人学习python,不知道从何学起。很多人学习python,掌握了基本语法过后,不知道在哪里寻找案例上手。很多已经做案例的人,却不知道如何去学习更加高深的知识。那 ...
分类:
编程语言 时间:
2020-08-28 15:03:53
阅读次数:
87
随着计算机语言的发展,以成本为核心的驱动力,推动着经历了汇编、C、C++、Java、Kotlin的发展,其目的在于让开发人员更好的聚焦于业务,而不用太关注语言本身的处理。近几年,又开始流行更高级的语言,它们被称之为现代编程语言,比如Rust、Go、Kotlin和TypeScript等。现代的核心原因,我认为可以总结为以下几点:入门更容易类型推断空指针安全内置的并发支持减少模板代码(简洁)操纵集合更
分类:
编程语言 时间:
2020-08-28 14:32:41
阅读次数:
96
在我们学习软件测试过程中,会遇到黑盒、白盒、灰盒这些测试策略,很多同学看到这些会有一些迷糊,不知道他们的区别在哪里,今天乐搏软件学院为大家详细介绍一下他们之间的区别。黑盒测试又叫数据驱动测试,本质上就是功能测试。把测试对象当做一个黑盒子,测试时,对程序内部的逻辑结构和内部特性,完全不需要考虑。根据需求说明书,测试程序的功能,是否符合它的说明白盒测试又称为结构测试或逻辑驱动测试。
分类:
其他好文 时间:
2020-08-13 22:18:32
阅读次数:
85
2001年12月,美国股市互联网泡沫破裂后没多久,巴菲特在《财富》杂志发布了一篇文章,谈了谈他对当前股票市场的看法。 在这篇文章中,他提出了一个判断股市整体估值的指标,后来被称为巴菲特指标。 01 巴菲特指标是什么意思? 很简单,这个指标当时指美国股市总市值占GNP的比重,计算公式如下: 巴菲特指标 ...
分类:
其他好文 时间:
2020-08-13 12:21:48
阅读次数:
404