各业务系统为使用mysql的业务数据，重复开发出多套数据同步工具，一方面难以管理，另外部分工具性能也偏差。需要一个统一为mysql数据提供同步服务的平台。该平台需支持离线同步，实时订阅，实时同步三大基本功能 架构 一、功能整合 1、各功能如何实现？ 离线同步：可理解为将根据一个sql查询出的数据同步 ...
分类：
其他好文 时间：
2019-04-07 10:06:49
阅读次数：
198
应用场景 rsync是可以实现增量备份的工具。配合任务计划，rsync能实现定时或间隔同步，配合inotify或sersync，可以实现触发式的实时同步。 同步过程 rsync同步过程中由两部分模式组成：决定哪些文件需要同步的检查模式以及文件同步时的同步模式。 检查模式 指按照指定规则来检查哪些文件 ...
分类：
其他好文 时间：
2019-03-31 16:51:48
阅读次数：
191
近期开始接触真正的实时同步，之前接触的SparkStreaming偏重于实时计算，kafka和flume只能算简单的数据同步，如今正式开始做产品化的数据同步项目。特此记录一些知识点。 ...
分类：
其他好文 时间：
2019-03-26 19:35:01
阅读次数：
177
linux应用程序编程应该要学习的函数使用列表linux应用层编程相关的manpage，具体包括的命令和函数，请参考https://www.kernel.org/doc/man-pages/select()、pselect（）、poll()、epoll（），epoll_create()，epoll_wait()，epoll_ctl()，close（）==同时监控多个fd的输入、输出inotify机
分类：
系统相关 时间：
2019-03-24 00:21:08
阅读次数：
205
参考EventHub.cpp 1、初始化inotify int mINotifyFd = inotify_init(); 2、将要监测的目录添加到inotify int result = inotify_add_watch(mINotifyFd, argv[1], IN_DELETE | IN_CR ...
分类：
其他好文 时间：
2019-03-18 11:52:00
阅读次数：
171
电脑线连相机，并且在电脑windows764安装captureone11实现实时同步查看拍出来的照片。问题：一般拍摄没有问题。相机在高速拍摄过程中，captureone显示出图明显的卡顿，延迟，卡死。。前期解决：前期更换存储机械硬盘——>三星固态硬盘；主机其他硬件更换更高配；软件、系统更换升级。效果只是改善一些根本问题还存在。前期电脑配置：操作系统Windows7专业版64位处理器英特尔Co
分类：
其他好文 时间：
2019-03-17 15:39:27
阅读次数：
1373
mydumper/myloader导出导入数据，并利用otter实时同步
分类：
其他好文 时间：
2019-03-17 00:58:16
阅读次数：
285
Samba服务[root@centos7~]#yuminstallsamba[root@centos7~]#systemctlstartsmb[root@centos7~]#ss-ntluNetidStateRecv-QSend-QLocalAddress:PortPeerAddress:PorttcpLISTEN050:139:tcpLISTEN050:445端口已开启:可以做共享了。主配置文件
分类：
其他好文 时间：
2019-03-13 10:45:22
阅读次数：
208
主从配置，也就是在主库上写数据，从库也会跟着实时同步，这里我在一台机器上起两个 redis 服务来做主从 ...
分类：
其他好文 时间：
2019-03-03 11:09:46
阅读次数：
236
运行环境：centos7.5 linux 打开文件数 too many open files 解决方法fs.inotify.max_user_watches默认值太小，导致too many open files执行：sysctl -w fs.inotify.max_user_watches="999 ...
分类：
其他好文 时间：
2019-02-26 13:14:25
阅读次数：
287
