session 分配的内存,在事务过程中用来存储二进制日志的缓存。 当我们执行多语句事务的时候,所有session的使用的内存超过max_binlog_cache_size的值时,就会报错: Multi-statement transaction required more than 'max_bi ...
分类:
系统相关 时间:
2020-05-28 16:39:03
阅读次数:
72
第1章 使用该工具的前提 1. binlog_format为ROW,且binlog_row_image为full或noblog,默认为full。 2. 必须开启MySQL Server,理由有如下两点: 1> 它是基于BINLOG_DUMP协议来获取binlog内容 2> 需要读取server端in ...
分类:
数据库 时间:
2020-05-26 01:27:59
阅读次数:
106
第1章 主从复制架构演变 1.1 高性能架构 读写分离架构(读性能较高) 1.代码级别 MySQL proxy (Atlas,mysql router,proxySQL(percona),maxscale)、 amoeba(taobao) xx-dbproxy等。 2.分布式架构(读写性能都提高): ...
分类:
数据库 时间:
2020-05-25 23:41:10
阅读次数:
123
1.1 准备配置文件 [root@localhost ~]# mkdir /data/330{7..9}/data -p [root@localhost ~]# mkdir -p /data/mysql/binlog_330{7..9} [root@localhost ~]# chown -R my ...
分类:
数据库 时间:
2020-05-25 00:17:23
阅读次数:
79
1. 准备主从环境(1主2从) 1.1 准备数据路径及配置文件 数据库软件目录: /opt/mysql/ 数据库数据目录: /data/{master20,slave21,slave22}/{data,binlog}主库端口3320从库端口分别为3321,3322 配置文件如下: cat > /da ...
分类:
数据库 时间:
2020-05-23 11:18:39
阅读次数:
64
1. 过滤复制 3.1 说明 过滤复制可以从两方面下手, 一个是配置主库的dump线程, 让其只发送需要同步的db二进制. 另一个就是配置从库的sql线程, 让其只回放我们需要同步的db二进制文件 主库: show master status; Binlog_Do_DB # 该参数用来指定需要同步的 ...
分类:
数据库 时间:
2020-05-23 00:37:07
阅读次数:
73
MySQL主从复制的流程(如下图): 主库会生成一个log dump 线程,用来给从库传binlog; 从库会生成两个线程,一个是I/O线程,一个是SQL线程; I/O线程会去请求主库的binlog,并将得到的binlog写入到 relay log(中继日志)文件中; SQL线程会读取 relay ...
分类:
数据库 时间:
2020-05-21 23:41:00
阅读次数:
86
DELETE、DROP、TRUNCATE命令在ROW格式的binlog下记录内容探究
分类:
其他好文 时间:
2020-05-20 09:30:31
阅读次数:
71
误删主库的在用binlog文件处理: 搭建有主从复制的,在删掉主库正在使用的binlog文件后, 主从依然可以工作. 经测试在不重启从库的前提下, 对主库的操作依然可以同步到从库, 从库重启后主从就会异常. 如不慎删掉了主库在用的binlog,条件允许时,建议使用主库的全备来恢复从库,重新搭建主从. ...
分类:
数据库 时间:
2020-05-19 22:34:57
阅读次数:
87
摘要 在上一篇中我们介绍了 "数据迁移的套路" ,但是没有介绍具体的方案,这篇着重介绍下具体的数据迁移方案 一. 设计目标 设计一个数据迁移的方案,需要实现以下目标 1. 迁移速度 qps 需要达到1k,这样能保证1亿的数据能够在1~2天内跑完 2. 迁移qps可控 迁移有可能对线上服务有影响,需要 ...
分类:
其他好文 时间:
2020-05-17 21:44:10
阅读次数:
76