一、python爬虫环境与简介 二、认识HTTP 三、简单静态网页爬取 四、常规动态网页爬取 五、模拟登陆 六、PC客户端抓包 七、Scrapy爬虫 一、python爬虫环境与简介 1、认识爬虫 (1)爬虫的概念 网络爬虫也被称为网络蜘蛛、网络机器人,是一个自动下载网页的计算机程序或自动化脚本。 网 ...
分类:
编程语言 时间:
2020-07-25 09:28:47
阅读次数:
66
关于CDN,想必你一定看过很多官方的解释。今天,CDN百科第七期,将用一篇3844字的文章,来带你了解CDN的诞生、术语、原理、特征以及应用场景,看完这篇文章,相信你将会对CDN这项互联网基础设施有更加透彻的了解。
分类:
其他好文 时间:
2020-07-24 23:49:28
阅读次数:
136
简介HAProxy是一个使用C语言编写的自由及开放源代码软件,其提供高可用性、负载均衡,以及基于TCP和HTTP的应用程序代理HAProxy特别适用于那些负载特大的web站点,这些站点通常又需要会话保持或七层处理,HAProxy运行在当前的硬件上,完全可以支持数以万计的并发连接,并且它的运行模式使得它可以很简单安全的整合进您当前的架构中,同时可以保护你的web服务器不被暴露到网络上HAProxy实
分类:
其他好文 时间:
2020-07-24 22:17:31
阅读次数:
94
开发场景举例 让我们以一个实际开发场景来切入这篇文章的正题。现在,假设需要开发这样一个需求:购物车商品结算时需要根据用户会员等级进行打折。 我们假设用户会员等级被分为几个档次:青铜、白银、黄金、钻石、王者,对应折扣分别为:九折、八折、七折、六折、五折。 那么,我们很容易想到的一种实现方式,就是像下面 ...
分类:
其他好文 时间:
2020-07-24 16:35:37
阅读次数:
74
首先需要搭建一个简单的应用 前端部分不多赘述,如果确实没接触过 Vue 项目,可以参考我的《Vue 爬坑之路》系列 后端服务可以参考之前的文章《Node.js 蚕食计划(六)—— MongoDB + Koa 入门》 完整的项目地址:https://github.com/wisewrong/Test- ...
分类:
数据库 时间:
2020-07-24 16:25:18
阅读次数:
85
简介 区别 Nginx、LVS及HAProxy负载均衡软件的优缺点 一、简介 ** 所谓四层就是基于IP+端口的负载均衡;七层就是基于URL等应用层信息的负载均衡;**同理,还有基于MAC地址的二层负载均衡和基于IP地址的三层负载均衡。 换句换说,二层负载均衡会通过一个虚拟MAC地址接收请求,然后再 ...
分类:
其他好文 时间:
2020-07-23 22:38:15
阅读次数:
81
1、常用部分 ①②③④⑤⑥⑦⑧⑨⑩???????????????????????????????一二三四五六七八九十 ???????????????????????????????????????????????????? °′″$¥〒¢£%@℃℉﹩﹪‰﹫㎡㏕㎜㎝㎞㏎m³㎎㎏㏄º○¤%$º¹²³ ? ...
分类:
其他好文 时间:
2020-07-23 01:41:29
阅读次数:
62
纹理基初知识 一、纹理 1)无论是 tga 文件还是 png/jpg 文件,最终图片文件都是要归结到位图文件去处理的。 纹理文件 --> TGA文件 --> OpenGL --> 位图 iOS开发中 --> OpenGL ES --> png/jpg --> 位图 2)原始图像数据: 图像存储空间 ...
分类:
其他好文 时间:
2020-07-22 20:57:07
阅读次数:
86
前面介绍了,XPath, id , class , link text, partial link text, tag name, name 七大元素定位方法,本文介绍webdriver支持的最后一个方法:by_css。css和XPath类似,也需要掌握一些语法,才能写出正确的,完整的css选择表达 ...
分类:
编程语言 时间:
2020-07-22 16:14:20
阅读次数:
87
到目前为止,Nmap中与主机发现相关的内容就已经讲完了,让我们以一个实例作为结束。
分类:
其他好文 时间:
2020-07-22 16:02:37
阅读次数:
105