一.关于爬虫爬虫，是一种按照一定的规则自动地抓取互联网信息的程序。本质是利用程序获取对我们有利的数据。反爬虫，从不是将爬虫完全杜绝；而是想办法将爬虫的访问量限制在一个可接纳的范围，不要让它过于频繁。二.提高爬虫效率的方法协程。采用协程，让多个爬虫一起工作，可以大幅度提高效率。多进程。使用CPU的多个核，使用几个核就能提高几倍。多线程。将任务分成多个，并发（交替）的执行。分布式爬虫。让多个设备去跑同
分类：
其他好文 时间：
2020-11-12 14:10:38
阅读次数：
9
继续回答星球水友提问：沈老师，MyISAM只支持表锁，但网上文章却说，在并发插入量比较大的时候，比较适合使用MyISAM，这矛盾吗？这个问题，涉及MySQL表锁的一些细节，借着这个问题，系统性说下表锁的“所以然”。画外音：网上不少文章只说结论，不说为什么，容易让人蒙圈。MySQL表锁知识系统性梳理。哪些存储引擎使用表锁？MySQL，除InnoDB支持行锁外，MySQL的其他存储引擎均只使用表锁，例
分类：
数据库 时间：
2020-11-10 11:33:20
阅读次数：
13
继续回答星球水友提问。沈哥，我们有个业务，类似于“标题分词检索”，并发量非常大，大概20W次每秒，数据量不是很大，大概500W级别，而且数据不会频繁更新，平均每天更新一次，请问有什么好的方案么？这是一个典型的，短文本分词搜索的问题，简单聊聊自己的经验。常见的文本检索方案有哪些？（1）数据库LIKE法将标题数据存放在数据库中，使用like来查询，方案非常简单，能支持简单的模糊搜索，但不支持分词。画外
分类：
其他好文 时间：
2020-11-10 11:31:19
阅读次数：
7
缓存 简单概括就是将对数据库操作查询所得到的数据放入另外一台机器上(缓存)中，当用户再次请求时，直接去缓存中拿，避免对数据库的频繁操作，加快数据的显示时间，需要知道的是，缓存里面的数据一般都设置有超时时间，缓存一般用在数据变化不大，实时率不高的情况下。 由于Django是动态网站，所有每次请求均会去 ...
分类：
其他好文 时间：
2020-11-10 11:16:05
阅读次数：
5
人才盘点——这些大佬怎么说黄旭(阿里前HRVP):CEO应该重点关注和盘点公司里的三种人,他们加起来差不多就是一副扑克牌。要打得一手好牌,管理者需要综合衡量员工的兴趣、阅历、业绩表现和利益诉求,也就是管好员工的“心、脑、手和钱包”。此外,“好牌”都有一个共同的特质:保持恐慌。朱震(CEO,前菜鸟副总裁):随着公司的发展,有的人留下、有的人离开,也会有新人加入。获取优秀人才、帮助员工成长,这永远是创
分类：
其他好文 时间：
2020-11-08 17:37:17
阅读次数：
18
高并发，几乎是每个程序员都想拥有的经验。原因很简单：随着流量变大，会遇到各种各样的技术问题，比如接口响应超时、CPU load升高、GC频繁、死锁、大数据量存储等等，这些问题能推动我们在技术深度上不断精进。 在过往的面试中，如果候选人做过高并发的项目，我通常会让对方谈谈对于高并发的理解，但是能系统性 ...
分类：
其他好文 时间：
2020-11-08 17:21:16
阅读次数：
20
一、首先是二叉树： 1）定义 2）前、中、后序遍历 二、二叉搜索树： 中序遍历是有序的 本身的定义也是递归的： 1）查找：复杂度 log2n （n表示数的节点个数） 极端情况，退化成链表，查找效率和链表一样 2）插入节点、删除节点也要会 三、平衡二叉树：左右子树都是平衡二叉树 1）2-3树 2）AV ...
分类：
其他好文 时间：
2020-11-07 17:44:46
阅读次数：
36
CDR作为绘图软件或者说平面设计软件使用频繁的功能之一，就是为绘制好的图片进行涂抹混色。 ...
分类：
其他好文 时间：
2020-11-06 01:54:33
阅读次数：
17
前言本文以程序员做需求的例子，比喻线程池的工作过程。以故事白话的方式展开，跟大家阐述线程池工作原理，以方便大家更好理解线程池，谢谢阅读哈~什么是线程池？什么是核心线程？什么是阻塞队列？什么是非核心线程？什么是空闲存活时间？什么是饱和策略？线程池工作原理流程图&源码概览github地址，感谢每一颗Star?https://github.com/whx123/JavaHome?公众号:「捡田螺
分类：
编程语言 时间：
2020-11-06 01:30:11
阅读次数：
21
聊聊JavaString.intern背后你不知道的知识导读：String.intern是一个JDK中的常用方法，通常用于缓存字符串，优化内存使用，然而频繁使用该方法也会导致别的问题，本文从该方法的实现入手，深入分析了可能出现的问题和解决方案。Java的String类有个有意思的public方法：publicStringintern()返回标准表示的字符串对象。String类维护私有字符串池。调用
分类：
编程语言 时间：
2020-11-04 19:05:19
阅读次数：
23
