一、介绍 ? Scrapy 是一个基于 Twisted 的 异步处理 框架，是纯 Python 实现的爬虫框架，其架构清晰，模块之间耦合较低，扩展性和灵活强，是目前 Python 中使用 最广泛的爬虫框架 。 1. 架构示意图； 它分为以下几个部分： Engine ：引擎，处理整个系统的数据流处理、 ...
分类：
其他好文 时间：
2019-02-09 12:07:07
阅读次数：
268
AWS里面无服务器服务模式（Serverless）是一个近两年很热门的技术，他可以允许服务无需任何服务器配置就可以在需要的时候执行代码。下面看一个简单的例子如何通过Lambda，APIGateway,S3等云服务来实现一个最基本的无服务器架构模式。例1：在某个网页上点击一个按钮,更新网页的内容。简单说明一下流程，用户访问S3的一个静态网站，点击一个按钮，执行一个javascript的AJAX的Ge
分类：
其他好文 时间：
2019-02-08 20:08:37
阅读次数：
160
【转】09-盒模型 盒模型 在CSS中，"box model"这一术语是用来设计和布局时使用，然后在网页中基本上都会显示一些方方正正的盒子。我们称为这种盒子叫盒模型。 盒模型有两种：标准模型和IE模型。我们在这里重点讲标准模型。 盒模型示意图 盒模型的属性 width：内容的宽度 height: 内 ...
分类：
其他好文 时间：
2019-02-07 12:19:08
阅读次数：
174
"4147:汉诺塔问题(Hanoi)" 总时间限制: 1000ms 内存限制: 65535kB 描述 一、汉诺塔问题 有三根杆子A，B，C。A杆上有N个(N 1)穿孔圆盘，盘的尺寸由下到上依次变小。要求按下列规则将所有圆盘移至C杆： 每次只能移动一个圆盘； 大盘不能叠在小盘上面。 提示：可将圆盘临时 ...
分类：
其他好文 时间：
2019-02-05 22:21:00
阅读次数：
221
Java 的自动内存管理主要是针对对象内存的回收和对象内存的分配。同时，Java 自动内存管理最核心的功能是 堆 内存中对象的分配与回收。 JDK1.8之前的堆内存示意图： 从上图可以看出堆内存分为新生代、老年代和永久代。新生代又被进一步分为：Eden 区＋Survivor1 区＋Survivor2 ...
分类：
编程语言 时间：
2019-02-04 12:52:25
阅读次数：
261
为什么用airtest 图片识别，写代码方便 airtest特点 适用范围：Android，Windows和iOS上的应用 支持基于图像识别的 Airtest 框架，适用于所有Android和Windows游戏 AirtestIDE中看到手机屏幕的镜像显示（实时刷新），并进行实时操作 两个框架： 基 ...
分类：
其他好文 时间：
2019-02-02 17:40:29
阅读次数：
417
分布式存储中常见的一项技术就是 ：分布式哈希表。它是哈希表的分布式的扩展，就是在多台机器的情况下，每个机器只存储一些数据，如何通过 哈希方式 对 数据 进行增，删，改，查等一些数据操作。 一致性哈希算法就是其中的一种实现方式。 上图是表示长度为5的二进制数值的 一致性哈希算法 的环状序列 的示意图 ...
分类：
其他好文 时间：
2019-02-02 01:02:23
阅读次数：
218
目录 4.1.1 背景概念 4.1.2 socket 概念特性 4.1.3 TCP_socket 4.1.4 UDP_socket 4.1.5 其他补充方法 4.1.1 背景概念 脑图结构 OSI 模型 4.1.2 socket 概念特性 脑图结构 理解示意图 额外补充 Socket是应用层与 TC ...
分类：
其他好文 时间：
2019-01-30 22:16:47
阅读次数：
201
盒模型 width:内容的宽高 height:内容的高 padding:内边距 border:边框 margin:外边距 盒模型的概念 在CSS中，"box model"这一术语是用来设计和布局时使用，然后在网页中基本上都会显示一些方方正正的盒子。我们称为这种盒子叫盒模型。 盒模型有两种：标准模型和 ...
分类：
其他好文 时间：
2019-01-30 19:10:24
阅读次数：
134
2018年下半年，UCloud首尔数据中心因外部原因无法继续使用，需要在很短时间内将机房全部迁走。为了不影响用户现网业务，我们放弃了离线迁移方案，选择了非常有挑战的机房整体热迁移。经过5个月的多部门协作，终于完成了既定目标，在用户无感知下，将所有业务完整迁移到同样位于首尔的新机房内。本文将详述这个大项目中最有难度的工作之一：公共组件与核心管理模块迁移的方案设计和实践历程。计划整个项目划分为四个大阶
分类：
其他好文 时间：
2019-01-28 17:41:47
阅读次数：
165
