一个系统发展初期，往往都是单机系统。应用和数据库在一台服务器上，随着业务的发展，访问量的增大，一台服务器性能就会出现天花板，往往已经难以支撑业务量了。这个时候就要考虑把数据库和应用服务器分开，访问继续增加，就会考虑数据库分库分表，应用服务器做负载均衡，其实这也属于分布式系统的一个范畴。分布式系统的核心概念就是一个“分”字，一台服务器支撑不住，那就两台，三台，四台....当然分之后会带来其他问题，比
分类：
其他好文 时间：
2019-08-22 15:58:29
阅读次数：
102
高并发场景下的限流策略: 在开发高并发系统时，有很多手段来保护系统：缓存、降级、限流。 当访问量快速增长、服务可能会出现一些问题（响应超时），或者会存在非核心服务影响到核心流程的性能时， 仍然需要保证服务的可用性，即便是有损服务。所以意味着我们在设计服务的时候，需要一些手段或者关键数据进行自动降级， ...
分类：
其他好文 时间：
2019-08-22 12:50:35
阅读次数：
87
本文目录 一 缓存介绍 二 Django中的6种缓存方式 三 Django6种缓存的配置 四 Django中的缓存应用 回到目录 一 缓存介绍 在动态网站中,用户所有的请求,服务器都会去数据库中进行相应的增,删,查,改,渲染模板,执行业务逻辑,最后生成用户看到的页面. 当一个网站的用户访问量很大的时 ...
分类：
其他好文 时间：
2019-08-21 00:30:43
阅读次数：
96
一、性能上报 为性能优化提供数据论证 h5 performance 接口调用耗时（埋点统计） 运行耗时 二、系统监控 监控系统的可靠性 PV（访问量） 成功监控 错误监控 三、其他统计 产品数据分析 平台统计 业务统计 简单上报 复杂上报 埋点上报 捕获上报： 面试题：有没有在捕获的过程实现某些功能 ...
分类：
其他好文 时间：
2019-08-21 00:19:47
阅读次数：
117
这是java高并发系列第29篇。 环境：jdk1.8。 本文内容 1. 介绍常见的限流算法 2. 通过控制最大并发数来进行限流 3. 通过漏桶算法来进行限流 4. 通过令牌桶算法来进行限流 5. 限流工具类RateLimiter 常见的限流的场景 1. 秒杀活动，数量有限，访问量巨大，为了防止系统宕 ...
分类：
编程语言 时间：
2019-08-20 17:01:47
阅读次数：
105
一个系统发展初期，往往都是单机系统。应用和数据库在一台服务器上，随着业务的发展，访问量的增大，一台服务器性能就会出现天花板，往往已经难以支撑业务量了。这个时候就要考虑把数据库和应用服务器分开，访问继续增加，就会考虑数据库分库分表，应用服务器做负载均衡，其实这也属于分布式系统的一个范畴。分布式系统的核心概念就是一个“分”字，一台服务器支撑不住，那就两台，三台，四台....当然分之后会带来其他问题，比
分类：
数据库 时间：
2019-08-20 15:24:41
阅读次数：
101
通用爬虫和聚焦爬虫 一、通用爬虫 通用网络爬虫是捜索引擎抓取系统（Baidu、Google、Yahoo 等）的重要组成部分。主要目的是将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。 二、通用搜索引擎（Search Engine）工作原理 通用网络爬虫 从互联网中搜集网页，采集信息，这些网 ...
分类：
其他好文 时间：
2019-08-19 22:44:08
阅读次数：
102
在90年代，一个网站的访问量一般都不大，用单个数据库完全可以轻松应付。在那个时候，更多的都是静态网页，动态交互类型的网站不多 初期架构 | center DAL，（Data Access Layer）。其功能主要是负责数据库的访问。简单地说就是实现对数据表的Select（查询）、Insert（插入） ...
分类：
数据库 时间：
2019-08-17 18:30:04
阅读次数：
137
对于Squid服务的部署可以参考博文：Squid代理服务器安装及部署对于Squid服务配置代理服务器可以参考博文：利用Squid构建传统代理及透明代理Squid服务的ACL访问控制Squid提供了强大的代理控制机制，通过合理设置ACL（访问控制列表）并进行限制，可以针对源地址、目标地址、访问的URL路径、访问的时间等各种条件进行过滤。在配置文件squid.conf中，ACL访问控制通过两个步骤来实
分类：
其他好文 时间：
2019-08-17 18:10:51
阅读次数：
101
原文: http://blog.gqylpy.com/gqy/272 " 由于Django是动态网站，所以每次请求都会去数据库中进行响应的操作。 当程序访问量大时，耗时必然会更加明显，最简单的解决方案就是使用缓存。 Django中的缓存： ==即将某一个view的返回值保存至内存或memcache中 ...
分类：
其他好文 时间：
2019-08-17 12:55:37
阅读次数：
83
