阅读目录 一 背景知识 二 同步、异步、回调机制 三 高性能 一 背景知识 爬虫的本质就是一个socket客户端与服务端的通信过程,如果我们有多个url待爬取,只用一个线程且采用串行的方式执行,那只能等待爬取一个结束后才能继续下一个,效率会非常低。 需要强调的是:对于单线程下串行N个任务,并不完全等 ...
分类:
其他好文 时间:
2018-01-22 16:08:20
阅读次数:
236
一.系统吞度量要素: 一个系统的吞度量(承压能力)与request对CPU的消耗、外部接口、IO等等紧密关联。单个reqeust 对CPU消耗越高,外部系统接口、IO影响速度越慢,系统吞吐能力越低,反之越高。 系统吞吐量几个重要参数:QPS(TPS)、并发数、响应时间 QPS(TPS):每秒钟req... ...
分类:
其他好文 时间:
2018-01-18 22:04:52
阅读次数:
151
VPX6100是北京青翼科技的一款基于6U VPX总线架构的高性能、高可靠性的应用系统平台,支持VPX、OpenVPX协议标准。该系统平台采用高性能6槽6U VPX背板,高度优化的拓扑结构,能够为用户提供各种高速串行总线的互联,该平台支持标准VPX插卡电源与高功率模块电源,为VPX系统功率提供最大的 ...
分类:
其他好文 时间:
2018-01-17 18:16:49
阅读次数:
625
1.1、主要特性 (1)直接驱动8位共阴式数码管(1英寸以下)或64只独立的LED; (2)能够管理多达64只按键,自动清除抖动,其中8只可以作为功能键使用; (3)段电流可达20mA,位电流可达100mA以上; (4)利用功率电路可以方便的驱动1英寸以上的大型数码管; (5)具有闪烁、段点亮、段熄 ...
分类:
其他好文 时间:
2018-01-16 18:38:41
阅读次数:
212
1、首先要看主板是否带USB3.0接口。 2、然后计算机-属性-设备管理器-通用串行总线,就可以看到是否有安装USB3.0驱动 1、首先要看主板是否带USB3.0接口。 2、然后计算机-属性-设备管理器-通用串行总线,就可以看到是否有安装USB3.0驱动 1、首先要看主板是否带USB3.0接口。 2 ...
分类:
其他好文 时间:
2018-01-16 18:05:42
阅读次数:
680
一、SaltStack概述Salt,,一种全新的基础设施管理方式,部署轻松,在几分钟内可运行起来,扩展性好,很容易管理上万台服务器,速度够快,服务器之间秒级通讯。salt底层采用动态的连接总线,使其可以用于编配,远程执行,配置管理等等.多种配置管理工具对比:Puppet(rubby开发,现在很少使用)ansible(python开发,轻量级,没有agent,大规模环境下使用ssh会很慢,串行传输)
分类:
其他好文 时间:
2018-01-16 17:57:20
阅读次数:
238
计算机“端口”是英文port的义译,可以认为是计算机与外界通讯交流的出口。其中硬件领域的端口又称接口,如:USB端口、串行端口等。软件领域的端口一般指网络中面向连接服务和无连接服务的通信协议端口,是一种抽象的软件结构,包括一些数据结构和I/O(基本输入输出)缓冲区。 按端口号可分为3大类: (1)公 ...
分类:
其他好文 时间:
2018-01-16 13:53:36
阅读次数:
224
USB口 一、什么是USB? USB是英文Universal Serial Bus的缩写,中文含义是“通用串行总线”。它是一种应用在PC领域的新型接口技术。早在1995年,就已经有PC机带有USB接口了,但由于缺乏软件及硬件设备的支持,这些PC机的USB接口都闲置未用。1998年后,随着微软在Win ...
分类:
其他好文 时间:
2018-01-16 11:11:36
阅读次数:
216