1.使用哈希的一种场景 当我们在数据库中存储海量数据时，由于单表数据存在上限，所以不得不分库分表存储。假设我们有2000W条数据，而单表上限为500W，我们部署了4台数据库服务器来存储这些数据，当我们需要查找某一条数据时，我们对四个数据库进行逐个查找，显然这样做效率太低。因此我们可以使用哈希算法，建 ...
分类：
其他好文 时间：
2019-07-21 18:39:42
阅读次数：
115
本人没有做过电商平台，但了解其中的道道，今天闲来无事，说说其中的道道。下边我要开始表演了。 在大型电商网站中，随着业务的增多，数据库中的数据量也是与日俱增，这时候就要将数据库进行分库分表了。 1、如何分库分表？ 两种解决方案：垂直拆分、水平拆分 垂直拆分：根据业务进行拆分，比如可以将一张表中的多个字 ...
分类：
数据库 时间：
2019-07-14 15:05:29
阅读次数：
115
为什么要分库分表 分库分表的设计 带来的问题 扩容 分布式事务 多个路由字段怎么设置 关于分库分表最全的一篇文章 这里介绍设计分库分表框架时应该考虑的设计要点，并给出相应的解决方案。 一、整体的切分方式 简单来说，数据的切分就是通过某种特定的条件，将我们存放在同一个数据库中的数据分散存放到多个数据库 ...
分类：
数据库 时间：
2019-07-11 23:18:32
阅读次数：
155
名词解释 库：database；表：table；分库分表：sharding 数据库架构演变 刚开始我们只用单机数据库就够了，随后面对越来越多的请求，我们将数据库的写操作和读操作进行分离， 使用多个从库副本（Slaver Replication）负责读，使用主库（Master）负责写， 从库从主库同步 ...
分类：
其他好文 时间：
2019-07-09 09:31:10
阅读次数：
116
MySQL数据库调优 定位慢查询得到生产环境那些sql语句响应慢，根据执行计划进行分析调优事物管理索引结构（B+树）平衡二叉树、B树、B+树分库分表后，如何解决查询 使用第三方数据库中间件（MyCat、Sharding-JDBC) 什么使用RedisSpring IOC原理 Logstash与MQ实 ...
分类：
编程语言 时间：
2019-07-08 10:50:58
阅读次数：
136
传统的单体架构的时候，我们基本是单库然后业务单表的结构。每个业务表的ID一般我们都是从1增，通过 设置自增起始值，但是在分布式服务架构模式下分库分表的设计，使得多个库或多个表存储相同的业务数据。这种情况根据数据库的自增ID就会产生相同ID的情况，不能保证主键的唯一性。 如上图，如果第一个订单存储在 ...
分类：
其他好文 时间：
2019-07-08 09:21:06
阅读次数：
125
菜哥，领导让我开发新系统了 这么说领导对你还是挺信任的呀~ 必须的，为了设计好这个新系统，数据库设计我花了好多心思呢 做一个系统我觉得不应该从数据库入手，应该从设计业务模型开始，先不说这个，说说你的数据库设计的优势 为了高性能我首先设计了分库 分表策略，为以后打下基础 那你的数据量将来会很大吗？分库 ...
分类：
其他好文 时间：
2019-07-08 09:20:30
阅读次数：
120
一 什么是分布式系统唯一ID 在复杂分布式系统中，往往需要对大量的数据和消息进行唯一标识。 如在金融、电商、支付、等产品的系统中，数据日渐增长，对数据分库分表后需要有一个唯一ID来标识一条数据或消息，数据库的自增ID显然不能满足需求，此时一个能够生成全局唯一ID的系统是非常必要的。 二、分布式系统唯 ...
分类：
其他好文 时间：
2019-06-23 22:53:11
阅读次数：
123
Shark简介 前身为Kratos，轻量级Mysql分库分表(Sharding)中间件，丰富的Sharding算法支持(2类4种分片算法)，能够方便DBA实现库的水平扩容和降低数据迁移成本。Shark站在巨人的肩膀上(SpringJdbc、Druid)，采用与应用集成架构，放弃通用性，只为换取更好的 ...
分类：
数据库 时间：
2019-06-21 18:28:13
阅读次数：
132
