主从介绍MySQL主从又叫做Replication、AB复制。简单讲就是A和B两台机器做主从后，在A上写数据，另外一台B也会跟着写数据，两者数据实时同步。MySQL主从是基于binlog的，主上须开启binlog才能进行主从。主从过程三个步骤主将更改操作记录到binlog中从将主的binlog事件（SQL语句）同步到本机并记录在relaylog中从根据relaylog里面的SQL语句按顺序执行该过
分类：
数据库 时间：
2018-06-29 14:02:45
阅读次数：
229
17.1 MySQL主从介绍MySQL主从介绍 MySQL主从又叫做Replication、AB复制。简单讲就是A和B两台机器做主从后，在A上写数据，另外一台B也会跟着写数据，两者数据实时同步的。 MySQL主从是基于binlog的，主上须开启binlog才能进行主从。 主从过程大致有3个步骤: 主将更改操作记录到binlog里; 从将主的binl
分类：
其他好文 时间：
2018-06-29 01:15:33
阅读次数：
171
MySQL主从介绍?MySQL主从又叫做Replication、AB复制。简单讲就是A和B两台机器做主从后，在A上写数据，另外一台B也会跟着写数据，两者数据实时同步的?MySQL主从是基于binlog的，主上须开启binlog才能进行主从。复制的基本过程如下：1)、Slave上面的IO_thread连接上Master，并请求从指定日志文件的指定位置（或者从最开始的日志）之后的日志内容；2)、Mas
分类：
数据库 时间：
2018-06-28 20:23:04
阅读次数：
211
一、无差异同步数据1.首先，在实践实时同步之前我们先来了解一下rsync无差异同步无差异推送数据加--delete1）备份--delete风险本地有，远端就有。本地没有远端有也会删除，服务器端的目录数据可能会丢失无差异拉取数据2）代码发布、下载--delete风险远端有，本地就有。远端没有的本地有也会删除，本地的目录数据可能丢失ps:上图会将远程端的/hzftp/test里的文件完全克隆到客户端的
分类：
其他好文 时间：
2018-06-27 16:45:26
阅读次数：
198
rsync介绍：是一款开源的、快速的、多功能的、全量及增量的本地货远程数据同步备份工具Rsync的工作方式：1.单个主机本地local之间的数据传输（类似cp命令）2.借助rcp,ssh等通道来传输数据（类似于scp）3.以守护进程（socket）的方式传输数据（rsync自身重要的功能）使用本地同步备份数据方式：直接本地同步：相当于cp(cp源目标)(rsync源目标)#保持属性同步：cp-a(
分类：
其他好文 时间：
2018-06-27 11:29:59
阅读次数：
213
31、监控目录，新创建的文件名追加到日志中#要安装inotify-tools软件包#!/bin/bashMON_DIR=/optinotifywait-mq--format%f-ecreate$MON_DIR|\whilereadfiles;doecho$files>>test.logdone32、find一次查找多个指定文件类型#find./-name‘*.jpg‘-o-name‘*
分类：
系统相关 时间：
2018-06-25 13:04:11
阅读次数：
239
一、环境准备 操作系统：CentOS release 6.8 (Final) x86_64 服务器IP： 同步目录： 二、安装及配置rsync 客户端配置（目标端） 1、安装rsync 2、配置rsync 3、配置rsync同步的账户密码 4、赋权启动rsync 服务端配置（数据源） 1、安装rsy ...
分类：
其他好文 时间：
2018-06-21 00:00:26
阅读次数：
206
10.19iptables规则备份和恢复serviceiptablessave将规则保存到默认配置文件/etc/sysconfig/iptablesiptables如果不使用serviceiptablessave命令，则重启之后规则会全部消失。如果想启动服务就让有规则，就把iptables保存在/etc/sysconfig/iptables利用iptables-save保存规则到指定路径：ipta
分类：
其他好文 时间：
2018-06-14 22:46:53
阅读次数：
368
根据太保家园项目的最终目标，在一期建设中，需要将太平洋保险集团下属的寿险，产险，车险等30多个核心系统数据，通过实时同步复制的方式，统一集中到大数据平台。其中涉及数据的转换，标化，清洗，去重等一系列过程，具体需求如下：
1、 需要将核心数据从30多个系统同步到大数据平台的kafka组件。
2、 确保数据复制的实时性（秒级）和数据的准确性
3、 复制的数据需要加上时间，操作类型等标签，便于后端应用识别
4、 以生产环境的dg库作为数据的汇聚源端，减轻对生产库的影响
5、 入kafka的数据格式可灵活配置，以便更好的适配后端应用
6、 需要具备数据操作统计和数据比对功能，便于核对数据的准确性
分类：
数据库 时间：
2018-06-13 15:14:53
阅读次数：
1371
