前提条件: 数据库容量上亿级别,索引只有id,没有创建时间索引 达到目标: 把阿里云RDS Mysql表数据同步到hive中,按照mysql表数据的创建时间日期格式分区,每天一个分区方便查询 每天运行crontab定时的增量备份数据,还是依据自增的id 遇到的问题: 没法建立创建时间的索引,不能按时 ...
分类:
数据库 时间:
2018-05-01 01:03:50
阅读次数:
1209
对于数据来讲,最重要的就是备份,数据是一切的根源!
分类:
数据库 时间:
2018-04-30 22:47:27
阅读次数:
259
#!/bin/bashDBname=用户名 #DB数据库backup_dir=/data/mysqlbackup/DataBackup #备份目录dbrootpwd=密码 #DB用户名root密码:expired_days=7
分类:
数据库 时间:
2018-04-29 15:22:50
阅读次数:
187
#!/bin/bash Date=$(date +%Y%m%d -d "1 days ago") Date7=$(date +%Y%m%d -d "7 days ago") Ip=10.0.10.10 /bin/mysqldump -uroot -p"******" -B test |gzip >/... ...
分类:
数据库 时间:
2018-04-28 15:44:29
阅读次数:
215
(1)简介 (2)机器损坏备份恢复 前提:需要有完全备份和增量备份(二进制日志文件) 1)备份 需要提前开启二进制日志 准备数据 完整备份 生成目录:ll /backup/2018 04 26 00 mysql all.sql 生成一些数据,用于使用二进制日志恢复 把二进制文件拷贝了其它目录,我这里 ...
分类:
数据库 时间:
2018-04-26 01:07:20
阅读次数:
198
Backup一直是数据库最重要的环节,mysql也比例外。而mysql最好的备份工具就是Percona xtrabackup和Mysql Enterprise backup(官方收费版)。
这里,我们就用Percona Xtrabackup来备份Mysql。
分类:
其他好文 时间:
2018-04-24 19:03:18
阅读次数:
166
备份,对于任何数据库,任何系统都是重中之重。针对Mysql,我选择percona xtrabackup软件。我更喜欢物理层面的热备份。而不是逻辑层面的备份(mysqldump),当然很多情况,也要定期做mysqldump备份。增加一个安全的备份选择。
分类:
数据库 时间:
2018-04-24 18:54:56
阅读次数:
244
-----xtrabackup备份简介xtrabackup是一个percona开源数据库备份软件,innobackupex则封装了xtrabackup,是一个脚本封装,所以能同时备份处理innodb和myisam,但在处理myisam时需要加一个读锁,对InnoDB存储引擎实现热备;备份原理: 开始... ...
分类:
其他好文 时间:
2018-04-21 19:43:22
阅读次数:
206
mysqldump 完全备份 二进制日志binlog做及时点还原
分类:
数据库 时间:
2018-04-21 19:42:51
阅读次数:
204