前言GPDB数据迁移可以通过全量恢复的方式,如果原来有3个机器,每个机器上面有2个Primary,2个Mirror,那么可以通过扩展3部机器,变成每部机器上一个Primary,1个Mirror,在迁移的过程中,需要保证:原有的机器利用Primary+Mirror可以组成一个完成的原有集群DB,可以正常启动,这样才能全量恢复,将数据恢复到扩展的机器上。如下图,将原有机器的P1/P2/P3/M0/M2
分类:
其他好文 时间:
2019-01-18 20:08:32
阅读次数:
244
日志是数据库的重要组成部份,按顺序以增量的方式记录了数据库上所有的操作,日志模块的设计对于数据库的可靠性、稳定性和性能都非常重要。 可靠性方面,在有一个数据文件的基础全量备份后,对运行中的数据库来说,日志文件的重要性大于数据文件,只要操作记录到日志中并完成落盘,就等于操作完成,无须等待数据文件落盘。
分类:
数据库 时间:
2019-01-17 20:03:41
阅读次数:
201
2018年7月9日,微信团队公布微信小程序广告组件全量开放的公告: “ 小程序(含小游戏类目)广告组件全量开放,开发者可在小程序后台自助申请开通流量主,开通后可在小程序中接入广告,按月获得广告收入。” 小程序流量主开通指引 1.开通门槛:累计独立访问用户(UV)不低于1000且无严重违规记录的小程序 ...
分类:
微信 时间:
2019-01-10 17:42:33
阅读次数:
332
今天做sqoop的增量导入操作,但是在第一次执行的时候,数据是全量的,后面数据就是按照增量的方式对数据进行导入操作。不想手动的去操作shell命令,就对 是否是全量导入还是变量导入做了一个判断操作但是使用下面的shell命令好像不管用 -test -[defsz] <path> : Answer v ...
分类:
其他好文 时间:
2019-01-09 17:36:28
阅读次数:
421
redis主从复制 和Mysql主从复制的原因一样,Redis虽然读取写入的速度都特别快,但是也会产生读压力特别大的情况。为了分担读压力,Redis支持主从复制,Redis的主从结构可以采用一主多从或者级联结构,Redis主从复制可以根据是否是全量分为全量同步和增量同步。下图为级联结构。 全量同步 ...
分类:
其他好文 时间:
2019-01-09 11:36:36
阅读次数:
178
一,简介 Rsync英文全称为Remote Rynchronization,从软件的名称就可以看出来,Rsync具有可使本地和远程两台主机之间的数据快速复制同步镜像,远程备份的功能,这个功能类似ssh自带的scp命令,但又优于scp命令的功能,scp都是全量拷贝,而rsync可以增量拷贝。rsync ...
分类:
其他好文 时间:
2019-01-05 15:10:12
阅读次数:
214
预热: 我们先从几个物理概念入手理解什么是流量,存量,增量 (1)存量:系统在某一时点时的所保有的数量; (2)流量:是指在某一段时间内流入/出系统的数量 (3)增量:则是指在某一段时间内系统中保有数量的变化 (4)增量=流入量--流出量 (5)本期期末存量=上期期末存量+本期内增量 正题 全量表: ...
分类:
其他好文 时间:
2019-01-05 13:21:55
阅读次数:
488
MySQL自动备份shell脚本 在数据库的日常维护工作中,除了保证业务的正常运行以外,就是要对数据库进行备份,以免造成数据库的丢失,从而给企业带来重大经济损失。通常备份可以按照备份时数据库状态分为热备和冷备,按照备份数据库文件的大小分为增量备份、差异备份和全量备份.一种全量备份的方法,来实现定时备 ...
分类:
数据库 时间:
2018-12-26 10:31:10
阅读次数:
363
MySQL故障演习 接上次的 "MySQL定时备份" 该次实验主要是练习在MySQL数据库发生误删等意外情况下,利用全量备份文件和增量备份文件恢复数据。 1. 实验环境 此时的author表和book表记录是这样的: 2. 每周日全量备份 2.1 凌晨3点全量备份 全量备份文件:db1_201812 ...
分类:
数据库 时间:
2018-12-18 13:58:19
阅读次数:
235
背景: 在一次xtts的测试中遇到因源库数据文件名称包含特殊字符导致表空间全量备份缺失文件,之所以说是诡异现象,是因为xtts的全备日志不报任何错误,在恢复阶段才发现缺少文件,这个缺陷比较隐晦,尤其在迁移的表空间较多的场景下,不注意的话很难第一时间发现。 环境: 客户环境是AIX 6.1 + Ora ...
分类:
其他好文 时间:
2018-12-17 10:02:23
阅读次数:
193