上次进过GTID复制的学习记录,已经搭建好了主从复制的服务器,现在利用现有的主从复制环境,加上正在研究的Mycat,实现了主流分布式数据库的测试 Mycat就不用多介绍了,可以实现很多分布式数据库的功能,极大的减轻数据库服务器的压力,包括读写分离以及分库分表,本测试对这两种功能都进行了测试,进行相应 ...
分类:
其他好文 时间:
2018-03-07 10:27:46
阅读次数:
192
Mysql Proxy Lua读写分离设置 一.读写分离说明 读写分离(Read/Write Splitting),基本的原理是让主数据库处理事务性增、改、删操作(INSERT、UPDATE、DELETE),而从数据库处理SELECT查询操作。数据库复制被用来把事务性操作导致的变更同步到集群中的从数 ...
分类:
数据库 时间:
2018-03-02 20:42:13
阅读次数:
207
读写分离:简单的说是把对数据库读和写的操作分开对应不同的数据库服务器,这样能有效地减轻数据库压力,也能减轻io压力。主数据库提供写操作,从数据库提供读操作,其实在很多系统中,主要是读的操作。当主数据库进行写操作时,数据要同步到从的数据库,这样才能有效保证数据库完整性。 分库分表: 水平分区:分表 垂 ...
分类:
数据库 时间:
2018-03-02 17:20:16
阅读次数:
175
数据在分片时,典型的是分库分表,就有一个全局ID生成的问题。单纯的生成全局ID并不是什么难题,但是生成的ID通常要满足分片的一些要求: 1 不能有单点故障。 2 以时间为序,或者ID里包含时间。这样一是可以少一个索引,二是冷热数据容易分离。 3 可以控制ShardingId。比如某一个用户的文章要放 ...
分类:
其他好文 时间:
2018-03-02 14:59:55
阅读次数:
197
Mycat 读写分离 数据库分库分表 中间件 安装部署,及简单使用 (部分转载 部分原创) ...
分类:
数据库 时间:
2018-03-01 19:45:17
阅读次数:
541
一、分片策略 Sharding-JDBC认为对于分片策略存有两种维度: 数据源分片策略(DatabaseShardingStrategy):数据被分配的目标数据源 表分片策略(TableShardingStrategy):数据被分配的目标表 两种分片策略API完全相同,但是表分片策略是依赖于数据源分 ...
分类:
数据库 时间:
2018-02-28 22:50:05
阅读次数:
8554
首先在pom文件中引入需要的依赖 二、新建一个sharding-jdbc.xml文件,实现分库分表的配置 这里我简单介绍下一些属性的含义, <rdb:strategy id="tableShardingStrategy" sharding-columns="user_id" algorithm-cl ...
分类:
数据库 时间:
2018-02-26 11:27:51
阅读次数:
446
IT系统设计从早期的Jsp/Servlet类应用为主,到今天的微服务、ServerLess、Docker、Paas、CI&CD、Devops。目标:高效研发、弹性扩展、高效运维。手段:Divide&Conquer (分层,解耦合)。 协议层从早期的HTTp+XML&SOAP 到今天的Restful ...
分类:
其他好文 时间:
2018-02-24 00:48:45
阅读次数:
205
在实现分库分表的情况下,数据库自增主键已经无法保证在集群中是全局唯一的主键了,因此mycat提供了全局的sequence,并且提供了本地配置、数据库配置等多种实现方式。 本地文件方式 采用该方式,mycat将sequence配置到classpath目录的sequence_conf.propertie ...
分类:
其他好文 时间:
2018-02-07 21:27:51
阅读次数:
281
关系型数据库本身比较容易称为系统性能瓶颈,单机存储容量、链接数、处理能力有限,如果在高并发和大数据量的访问下就需要分库分表(分布式系统中间件如:mongodb自身支持分区),分库分区是指把数据库数据物理拆分到多个实例或多台机器上分库分表需要数据的合并,查询或更新条件的分离、事物的分离等待后果业务实现 ...
分类:
其他好文 时间:
2018-02-07 14:46:18
阅读次数:
145