今天跟大伙一起聊聊分布式系统的架构的套路。在开始说套路之前，大家先思考一个问题，为什么要进行分布式架构？ 大多数的开发者大多数的系统可能从来没接触过分布式系统，也根本没必要进行分布式系统架构，为什么？因为在访问量或者QPS没有达到单台机器的性能瓶颈的时候，根本没必要进行分布式架构。那如果业务量上来了 ...
分类：
其他好文 时间：
2018-09-22 12:52:53
阅读次数：
156
<!-- flowchart 箭头图标 勿删 --> 1、引言 知乎存储平台团队基于开源Redis 组件打造的知乎 Redis 平台，经过不断的研发迭代，目前已经形成了一整套完整自动化运维服务体系，提供很多强大的功能。本文作者陈鹏是该系统的负责人，本次文章深入介绍了该系统的方方面面，值得互联网后端程 ...
分类：
其他好文 时间：
2018-09-19 21:55:20
阅读次数：
197
本文来自知乎官方技术团队的“知乎技术专栏”，感谢原作者陈鹏的无私分享。 1、引言 知乎存储平台团队基于开源Redis 组件打造的知乎 Redis 平台，经过不断的研发迭代，目前已经形成了一整套完整自动化运维服务体系，提供很多强大的功能。本文作者陈鹏是该系统的负责人，本次文章深入介绍了该系统的方方面面 ...
分类：
其他好文 时间：
2018-09-18 13:46:02
阅读次数：
170
1.背景 我们有个业务，会调用其他部门提供的一个基于http的服务，日调用量在千万级别。使用了httpclient来完成业务。之前因为qps上不去，就看了一下业务代码，并做了一些优化，记录在这里。 先对比前后：优化之前，平均执行时间是250ms；优化之后，平均执行时间是80ms，降低了三分之二的消耗 ...
分类：
Web程序 时间：
2018-09-15 13:08:39
阅读次数：
248
1. 背景 工程架构中有很多访问下游的需求，下游包括但不限于服务/数据库/缓存，其通讯步骤为： （1）与下游建立一个连接 （2）通过这个连接，收发请求 （3）交互结束，关闭连接，释放资源 2. 为什么需要连接池？ 当并发量很低的时候，建立连接和关闭连接的过程是没问题的，但当服务单机QPS达到几百、几 ...
分类：
其他好文 时间：
2018-09-15 11:33:30
阅读次数：
148
分布式系统的特点 高并发,大流量(qps,tps) 海量数据 什么是分布式 分布式系统是由很多计算机组成, 他们之间的通信通过网络连接完成, 对外表现为一个整体. 分布式技术上需要解决两个问题, 一个是业务拆解, 一个是节点通信. 分布式和集群的关系 分布式是指一个系统由多个业务模块组成,他们分别部 ...
分类：
其他好文 时间：
2018-09-14 13:53:15
阅读次数：
130
写在之前的话 最近在工作中总是遇到服务的QPS在压测的时间比较低的情况。于是就开始了性能优化之旅，这个过程是很是曲折。一开始的时候认为是服务的业务逻辑比较多，大部分的时间都花在优化业务逻辑，减少与其他服务和数据库等接口的调用，使用缓存等方式提高性能。上述的工作都是对性能有提升的，但是对于一个熟练的农 ...
分类：
其他好文 时间：
2018-09-13 20:06:01
阅读次数：
175
昨天CodeReview的时候看到同时使用RateLimiter这个类用作QPS访问限制.学习一下这个类. RateLimiter是Guava的concurrent包下的一个用于限制访问频率的类. 1.限流 每个API接口都是有访问上限的,当访问频率或者并发量超过其承受范围时候,我们就必须考虑限流来 ...
分类：
编程语言 时间：
2018-09-03 13:50:28
阅读次数：
167
最近学习了关于使用MySql数据的实现主动结构的原理，在以前的并发访问低的场景一下，一般一台性能高的服务器作为一个MySql数据，就可以满足业务的增删改查场景，但是随着网络用户的增加 当出现高并发，高QPS的情况下，一台MySql就很难支撑这种场景了，根据现在的分布式处理架构，处理在使用Redis这 ...
分类：
数据库 时间：
2018-09-02 02:03:10
阅读次数：
160
1、QPS：系统每秒处理的请求数（query per second） 2、RT：系统的响应时间，一个请求的响应时间，也可以是一段时间的平均值 3、最佳线程数量：刚好消耗完服务器瓶颈资源的临界线程数 ? QPS和RT的关系： 对于单线程：QPS=1000/RT 对于多线程：QPS=1000*线程数量/ ...
分类：
其他好文 时间：
2018-08-29 14:45:19
阅读次数：
133
