我们在做爬虫的过程中经常会遇到这样的情况：最初爬虫正常运行，正常抓取数据，一切看起来都是那么的美好，然而一杯茶的功夫可能就会出现错误，比如403 Forbidden；出现这样的原因往往是网站采取了一些反爬虫的措施，比如，服务器会检测某个IP在单位时间内的请求次数，如果超过了某个阈值，那么服务器会直接 ...
分类：
编程语言 时间：
2018-12-18 20:29:29
阅读次数：
212
一.需求：提高首评加载速度，除了要将所有使用的图片,资源文件压缩，添加懒加载，还需要合并页面中使用到的所有图标到一张大图里，减少请求次数 二.实现：所有图标放到一张大图上，使用background定位获取到要显示的图标并控制元素的宽高即可 三.代码： .logo{ background:url('. ...
分类：
Web程序 时间：
2018-12-13 14:28:20
阅读次数：
230
精灵图 精灵图(css sprites,css精灵,css雪碧,雪碧图),图片整合技术 原理:将多张单一的图片整合到一张图上，以背景引入,并使用background-position调整背景位置，使之显示不同图片 目的:降低浏览器向服务器的请求次数,提高网页加载速度 优点:降低请求次数,多张图整合成 ...
分类：
Web程序 时间：
2018-12-12 16:27:11
阅读次数：
240
最近有使用zabbix的api进行一些操作和开发，找了一圈都没有有关authtoken有效期的，每次获取在不使用ssl的情况下密码是明文太不安全了；得看看这个有效期，可以减少请求次数，不要每次操作都获取一遍。找一圈还得×××谷歌，终于找到authtoken获取后的失效时间取决于用户登录失效时间配置（默认登录不失效……）；配置方法："Administration"(TopMenu)
1.减少http请求次数 2.避免页面重定像 当客户端收到服务器的跳转回复时，客户端再次根据服务器回复中的location指定的地址再次发送请求，例如以下跳转回复。 当客户端遇到这种回复的时候，用户只能等待客户端再次发送请求，有的网站甚至会一直跳n次，跳到他想带你去的地方…当然在这个时候用户看不到任 ...
分类：
其他好文 时间：
2018-11-30 17:31:35
阅读次数：
165
1.多采用雪碧图 将很多图片合成一张图片，需要多次请求，只需要一次就请求过来了，减少向服务器的请求次数 2.阻止超链接的默认行为 点击超链接，会向后台发送请求，刷新页面，所以要以<a href="javascript:;"></a> 取消刷新页面的功能 3.减少dom回流 dom回流： 添加一个，对 ...
分类：
Web程序 时间：
2018-11-30 15:32:46
阅读次数：
140
iostat是sysstat工具的一个命令，用于查看 CPU和磁盘的IO信息 常用参数： c：仅显示CPU的统计信息（默认显示CPU和磁盘的IO信息） d：仅显示磁盘的IO信息 k：以K为单位显示美妙的磁盘请求次数 p：指定设备，ALL表示全部设备 输出说明： avg cpu段： %user：用户空 ...
分类：
移动开发 时间：
2018-11-25 10:11:30
阅读次数：
199
过于追求完美，可能什么都得不到。前面几次由于没解决所有的四道题，已经错过了好几周的总结了。与其什么都没有，还不如做多少写多少。 问题：933. 最近的请求次数 写一个 RecentCounter 类来计算最近的请求。 它只有一个方法：ping(int t)，其中 t 代表以毫秒为单位的某个时间。 返 ...
分类：
其他好文 时间：
2018-11-04 14:17:07
阅读次数：
265
1 class RecentCounter 2 { 3 private: 4 queue q; 5 public: 6 RecentCounter() 7 { 8 } 9 10 int ping(int t) 11 { 12 if(q.emp... ...
分类：
其他好文 时间：
2018-11-04 14:05:45
阅读次数：
652
LayaAir版本:Laya2.0.0bate4.一:前言之所以选用文件模式.本人觉得有这么几个好处:①,在制作小游戏时,可最大限度的减少包体大小(这个是显而易见的,尤其是UI比较多/大的情况之下)②,可以使用Zip等打包生成的文件,从而相对减少网络请求次数.③,可以对UI类再次的封装(继承Scane).从而最大限度得提升本系统的扩展性,适应性的.本篇只讲解文件模式的实现方式.二:使用文件模式①,
分类：
其他好文 时间：
2018-11-03 12:39:41
阅读次数：
887
