主（Master）从（Slave）复制：主数据库实时同步到从数据库。 MySQL数据库自身提供的主从复制功能可以方便的实现数据的多处自动备份，实现数据库的拓展。多个数据备份不仅可以加强数据的安全性，通过实现读写分离还能进一步提升数据库的负载性能。 下图就描述了一个多个数据库间主从复制与读写分离的模型 ...
分类：
数据库 时间：
2018-12-16 16:36:16
阅读次数：
190
<!-- flowchart 箭头图标 勿删 --> 引言： 验证表明：mongo-connector工具支持MongoDB与ES之间的实时增insert、删delete、改update操作。 对于历史数据，mongo-connector工具不能同步到ES中，根因是本身工具不支持(初步界定），还是没 ...
分类：
数据库 时间：
2018-12-14 13:02:20
阅读次数：
402
lsyncd 是一个支持实时、双向、多机器的多模式文件同步工具。 ...
分类：
其他好文 时间：
2018-12-13 19:21:23
阅读次数：
251
同步：增量拷贝，只传输变化过的数据 rsync [ 选项] 源目录/目标目录 -a :归档模式 相当于 -rlptgoD -v:显示详细操作信息 -z:传输过程中启用压缩/解压 --delete:删除目标目录中多余的文档 实时同步： 1.实现ssh无密码认证(这里以192.168.4.8为客户端） ...
分类：
其他好文 时间：
2018-12-10 11:36:05
阅读次数：
201
Inotify事件监控工具 Inotify是一种异步的文件系统事件监控机制软件，通过inotify可以监控文件系统中添加，删除，修改，移动等各种事件，利用这个内核接口，第三方软件就可以监控文件系统性文件的各种变化情况。 Inotify的软件版本 （1）inotify-tools （2）sersync ...
分类：
其他好文 时间：
2018-12-08 13:22:28
阅读次数：
148
01.为什么要使用实时同步服务 a-因为定时任务有缺陷,-一分钟以内的数据无法进行同步,容易造成数据丢失; b-用户上传数据信息需要实时备份保存. 实时同步实现及工作原理. 01. 实时监控同步数据目录信息变化; 02. 监控目录发生变化进行数据推送. 实时同步监控服务器部署过程,(inotify服 ...
分类：
其他好文 时间：
2018-12-08 13:03:15
阅读次数：
224
一、rsync介绍 rsync英文全称为Remote synchronization，从软件的名称就可以看出来，Rsync具有可是本地和远程两台主机之间的数据快速复制同步镜像、远程备份的功能，这个功能类似ssh带的scp命令，但又优先于scp命令的功能，scp每次都是全量拷贝，而rsync可以增量拷 ...
分类：
其他好文 时间：
2018-12-07 21:12:13
阅读次数：
266
使用场景 现有服务器A和服务器B，如果服务器A的指定目录（例如 /home/paul/rsync/ ）中的内容发生变更（增删改和属性变更），实时将这些变更同步到服务器B的目标目录中（例如 /home/paul/rsync/ ）。 数据镜像备份工具Rsync Rsync是一个非常快速和灵活的文件复制工 ...
分类：
系统相关 时间：
2018-12-07 11:50:34
阅读次数：
182
1.准备环境 2.inotifywait监控目录状态变化 3.循序渐进的同步脚本 4.参数优化 5.inotify优缺点 监控文件系统事件变化,通过同步工具实现实时数据同步; 并发如果大于200个文件(10-100k),同步就会有延迟. 6.通过start/stop控制inotify.sh脚本的启动 ...
分类：
编程语言 时间：
2018-11-30 20:02:01
阅读次数：
217
MySQL主从又叫做Replication、AB复制。简单讲就是A和B两台机器做主从后，在A上写数据，B也会跟着写数据，两者数据实时同步 MySQL主从是基于binlog的，主上须开启binlog才能进行主从。 主从过程大致有3个步骤 1）主将更改操作记录到binlog里 2）从将主的binlog事 ...
分类：
数据库 时间：
2018-11-29 15:08:26
阅读次数：
202
