问题描述: 1、从库环境:MySQL 5.7.19,主从都开启GTID模式 2、MySQL数据目录所有者被修改,导致数据库服务异常关闭 2、修改数据目录所有者,重启数据库服务,开启复制,报错信息为: 错误解决: 1、检查主从GTID设置,正常 2、解析binlog日志检查,发现事务包含GTID信息 ...
分类:
数据库 时间:
2019-03-26 10:36:19
阅读次数:
245
背景: 最近后端基于mongo的项目越来越多,MySQL基于冷备份+binlog可以恢复至任意时间点,那么mongo是否有同样的功能呢?经过调研发现可以通过dump+oplog可以实现粒度更细致的恢复。 以下是实验步骤,附脚本内容。 1、 制作测试数据并且获取冷备 2、模拟线上两个冷备份之间的数据写 ...
分类:
数据库 时间:
2019-03-25 16:08:44
阅读次数:
795
环境说明: 主服务器:CentOS7.5 从服务器:Windows10(本地测试机)1.配置master(主服务器,CentOS7.5)1.1首先查看CentOS上面的MySQL是否启动systemctlstatusmysqld1.2修改MySQL配置文件vi/etc/my.cnf添加以下内容:#服务器唯一id,默认是1(主从都必须不一样)server-id=1000#启动二进制日志名称为my
分类:
数据库 时间:
2019-03-14 16:39:19
阅读次数:
248
用canal同步MySQL binlog到kafka,消费kafka topic乱码问题解决 ...
分类:
其他好文 时间:
2019-03-13 16:33:49
阅读次数:
164
一、简介 pt-query-digest是用于分析mysql慢查询的一个工具,它可以分析binlog、General log、slowlog,也可以通过SHOWPROCESSLIST或者通过tcpdump抓取的MySQL协议数据来进行分析。可以把分析结果输出到文件中,分析过程是先对查询语句的条件进行 ...
分类:
数据库 时间:
2019-03-12 18:37:00
阅读次数:
216
在主服务器操作: 1.查看当前主从库是用哪个binlog日志在做组从 show master status show slave status 2.查看主库的binlog日志 show master logs 3.备份: 删除之前先做备份,避免删错,虽然耗费时间,但是换来的是意外发生导致的心脏承受不 ...
分类:
数据库 时间:
2019-03-12 12:09:15
阅读次数:
209
1、面试官心里分析 其实这个也是用MQ的时候必问的话题,第一看看你了解不了解顺序这个事儿?第二看看你有没有办法保证消息是有顺序的?这个生产系统中常见的问题。 2、面试题剖析 我举个例子,我们以前做过一个mysql binlog同步的系统,压力还是非常大的,日同步数据要达到上亿。mysql -> my ...
分类:
其他好文 时间:
2019-03-08 23:31:46
阅读次数:
208
最近做了 server_log 日志数据库记录,仅仅插入,由平台来获取数据进行分析的需求。 但是内部反馈插入数据库记录非常耗时,我就很纳闷了,一个insert怎么会 30-50ms 呢?按说应该在 0.5ms 以内的; 经过分析,发现是InnoDB数据库的Row_Format格式问题,改为MyISA ...
分类:
数据库 时间:
2019-03-05 23:05:22
阅读次数:
1090
初识MySQL日志binlogMySQL重要log,二进制日志文件,记录所有DDL和DML语句(除select),事件形式记录,包含语句所执行的消耗时间,事务安全型。DDL(数据库定义语言),主要命令有create、alter、drop等。DDL主要定义或改变表table的结构、数据类型。建表时使用。MDL(数据操纵语言),主要命令有select、update、insert、delete。mysq
分类:
数据库 时间:
2019-02-27 15:51:54
阅读次数:
269