浏览器渲染页面也就表示我们网上的资源已经请求成功 首先我们要明确浏览器渲染页面大致分为这几个步骤 1.浏览器解析html文档从而使构建成dom文档树=>2.构建render树=>3.布局render树=>4.绘制render树 1.浏览器会将html文档解析成一个dom文档树,dom树构建的过程是一 ...
分类:
其他好文 时间:
2019-10-23 22:14:44
阅读次数:
83
看了好几本大冰的书,感觉对自己的思维有不少的影响。想看看其他读者的评论。便想从当当下手抓取他们评论做个词云。想着网页版说不定有麻烦的反爬,干脆从手机客户端下手好了。果其不然,找到一个书评的api。发送请求就有详情的json返回,简直不要太方便... 要是对手机客户端做信息爬取,建议安装一个手机模拟器 ...
1) 响应头 add_header 例如: 要小心Nginx的add_header指令详解: 当当前层级中没有add_header指令才会继承父级设置。所以我的疑问就清晰了:location中有add_header,nginx.conf中的配置被丢弃了。 例如你在 location层添加了一个add ...
分类:
其他好文 时间:
2019-10-04 14:47:16
阅读次数:
1563
转自:https://www.cnblogs.com/nulige/p/7613721.html 一、mongodb主从复制配置 主从复制是MongoDB最常用的复制方式,也是一个简单的数据库同步备份的集群技术,这种方式很灵活.可用于备份,故障恢复,读扩展等. 最基本的设置方式就是建立一个主节点和一 ...
分类:
数据库 时间:
2019-09-25 12:59:00
阅读次数:
118
selenium自动化测试工具可谓是爬虫的利器,基本动态加载的网页都能抓取,当然随着大型网站的更新,也出现针对selenium的反爬,有些网站可以识别你是否用的是selenium访问,然后对你加以限制. 当当网目前还没有对这方面加以限制,所以今天就用这个练习熟悉一下selenium操作,我们可以试一 ...
分类:
其他好文 时间:
2019-09-24 10:35:29
阅读次数:
118
$luogu\ P1886$滑动窗口 "题目链接" 这道题目比较简单,但是因为经常忘记单调队列做滑动窗口所以写博客来加深一下印象。 如果求区间最小值,我们用发现右端点从前往后扫的方法一个数如果有贡献,当且仅当当前扫描的右端点的前面到这个数中间没有比这个数更小的数,因为如果有比这个数更小的数的话,这个 ...
分类:
其他好文 时间:
2019-09-21 12:53:21
阅读次数:
67
一. 简介 1. Dubbox 是一个分布式服务框架,其前身是阿里巴巴开源项目Dubbo ,被国内电商及互联网项目中使用,后期阿里巴巴停止了该项目的维护,当当网便在Dubbo基础上进行优化,并继续维护,为了与原有的Dubbo区分,故将其命名为Dubbox。 2. 工作原理 3. 节点角色说明: + ...
分类:
其他好文 时间:
2019-09-14 10:32:14
阅读次数:
75
无论你是初试牛刀的初学者,还是渐入佳境的潜力新星,亦或是经验丰富的竞赛老将,一份适合自己的书单总是奥赛学习的致胜法宝。本期推送,我们针对物理竞赛整理了一系列经典书目。希望大家可以结合自身经历、基础实力,选择适合自己的奥赛书籍,让一本本好书陪伴自己走完这段美丽而艰辛的竞赛生涯。 入 门 书 单 ▼01 ...
分类:
其他好文 时间:
2019-09-12 18:35:39
阅读次数:
147
1.Dubbox简介 Dubbox 是一个分布式服务框架,其前身是阿里巴巴开源项目Dubbo ,被国内电商及互联网项目中使用,后期阿里巴巴停止了该项目的维护,当当网便在Dubbo基础上进行优化,并继续维护,为了与原有的Dubbo区分,故将其命名为Dubbox。 Dubbox 致力于提供高性能和透明化 ...
分类:
系统相关 时间:
2019-09-11 23:51:54
阅读次数:
134
思路:使用UI+接口的方式来查找验证码图片和获取验证码元素进行参数输入(用截图方式)(非图片类型验证码无法实现) 我们以访问当当网的注册界面来演示 1.通过selenium定位查找验证码并截图保留 1引入selenium包,创建web驱动,进入登录界面,执行无误 2创建截图函数:查找验证码元素,截下 ...
分类:
其他好文 时间:
2019-09-10 01:10:03
阅读次数:
112