1 MySQL的备份设计 1.1 备份策略的设计 备份周期，可以根据数量来进行选择 备份工具： 可以选择mysql软件自带的命令mysqldump 或者 XBK工具 备份方式： 全备 增量 1.2 检查备份的可用性 crontab -l :检查定时任务中是否有备份的脚本 查看备份日志 1.3 定期的 ...
分类：
数据库 时间：
2020-10-30 12:43:52
阅读次数：
21
之前写过一篇文章:binlog还能这么用之Canal篇，在里面介绍了一些增量数据迁移的一些方法，但是对于整体的数据的迁移介绍得不是很深，这里想对迁移数据整体做一个介绍，希望能帮助到大家。背景在星爷的《大话西游》中有一句非常出名的台词：“曾经有一份真挚的感情摆在我的面前我没有珍惜，等我失去的时候才追悔莫及，人间最痛苦的事莫过于此，如果上天能给我一次再来一次的机会，我会对哪个女孩说三个字：我爱你，如果
分类：
其他好文 时间：
2020-10-29 09:41:57
阅读次数：
14
Celery使用过程中的内存泄露问题问题描述celery异步任务在定时循环的执行异步任务，隔了半个月左右，收到内存告警的信息，连续一周内内存是在缓慢增加的。进行top命令查询内存的占用率是很高的如下图所示问题定位使用MemoryProfiler工具包进行debug，发现异步任务中存在内存增量的地方大多是发送request请求的地方。例如下面的例子Line#MemusageIncrementOccu
分类：
其他好文 时间：
2020-10-26 11:47:49
阅读次数：
33
达梦DB遇到的若干障碍管道连接超时“管道连接超时”问题由于提示信息非常少，令人费解。尤其按照网上方法仍无法解决后，就更令人难以捉摸了。此问题还可从下列2方面进行排查：1）如果关闭了DMAPService，请看情况1；2）如果用root进行了DM7安装，请看情况2。1.1.情况1，报错信息含有“DM_PIPE_DMAP_RD”或“DM_PIPE_DMAP_WR”这种情况，大多是因为关闭了DmAPSe
分类：
数据库 时间：
2020-10-21 20:54:11
阅读次数：
31
Canal是阿里巴巴旗下的一款开源项目，利用Java开发。主要用途是基于MySQL数据库增量日志解析，提供增量数据订阅和消费，目前主要支持MySQL。 ...
分类：
数据库 时间：
2020-10-20 16:24:09
阅读次数：
50
备份还原备份就是数据库在某一个时间点的副本数据库备份的目的：防止数据库丢失，防止天灾人祸（地震、火灾、人为操作、硬件故障）备份主要有：物理备份和逻辑备份物理备份主要备份的是使用过有效的数据页，逻辑备份主要是备份的数据库对象（表、视图）。物理备份：分为联机备份和脱机备份；完全备份和增量备份完全备份：备份的数据库或指定者表空间的全部数据。增量备份：是指在上一次全备或增备后，以后每次的备份只需要备份修改
分类：
其他好文 时间：
2020-10-18 16:21:05
阅读次数：
34
只需考虑每次加入后答案的增量，即增加的子串的答案。 发现有贡献的子串为 \(\text{border}\)，那么每次就只需维护 \(\text{border}\) 集合的变化。若子串 \([1,pos]\) 为子串 \([1,i]\) 的一个 \(\text{border}\)，则 \(s_{pos ...
分类：
其他好文 时间：
2020-10-06 21:16:44
阅读次数：
41
多台服务器间的文件实时同步 一、rsync ? 与传统的cp、tar备份方式相比，rsync具有安全性高、备份迅速、支持增量备份等优点，通过rsync可以解决对实时性要求不高的数据备份需求，例如定期的备份文件服务器数据到远端服务器，对本地磁盘定期做数据镜像等。 随着应用系统规模的不断扩大，对数据的安 ...
分类：
其他好文 时间：
2020-09-24 21:58:16
阅读次数：
40
HDFS个人数据存储的核心--分布式+共享存储5G时代得到来，大数据存储迅速暴涨，个人存储市场的存量不断扩大，同时增量也在快速增长，预计每年个人产生的数据会有20%的复合增长率，每年的会释放数十亿美元产值的数据存储市场增量。关于接下来的个人数据存储市场发展的方向，不仅仅是一个经济问题而且更加是互联网世界“个人主权”的问题，是隐私、安全、便捷等各种因素的集合，往大了说如果个人数据的问题得不到突破性的
分类：
其他好文 时间：
2020-09-18 02:37:28
阅读次数：
36
官网：urbackup.org 这个备份工具其实相对来讲还是可以的，只是文档说明比较少，很多需要自己尝试总结出来， 当然很多人会直接用rsync去备份，但使用专门的备份工具能精确看到每个备份点，而且可提供web页面。 服务器安装方法： wget https://download.opensuse.o ...
分类：
系统相关 时间：
2020-09-17 23:53:14
阅读次数：
61
