在网上搜寻了很多方案,在liux下做文件同步,有如下几种方式: 1、nfs实现web数据共享 2、rsync +inotify实现web数据同步 3、rsync+sersync更快更节约资源实现web数据同步 4、unison+inotify实现web数据双向同步 ...
分类:
其他好文 时间:
2014-12-29 18:46:25
阅读次数:
170
Gearman 实现多数据库数据同步 测试环境:windows(mysql)+ 虚拟机(ubuntu + mysql)+ PHP 1:gearman 的官方文档可以了解gearman,在ubuntu中安装gearman : sudo apt-get update sudo apt-g...
分类:
其他好文 时间:
2014-12-28 15:28:04
阅读次数:
135
2014-12-24 Created By 鲍新建一、摘要1.OGG是数据同步软件,或者说是逻辑复制软件,其竞争对手有IBM CDC,DELL shareplex,DSG,DDS等等。2.OGG软件是需要安装在操作系统上的,Oracle DB软件没有自带OGG软件(至少目前是这样的)3.OGG软件有...
分类:
数据库 时间:
2014-12-24 17:50:24
阅读次数:
302
一、目录需求问题解决方案二、需求现在有接近Z台分布式数据库服务器,M台汇总数据库。当前需要将Z台数据库中的每个数据库中的关键性数据同步到汇总数据库上。汇总数据库上的数据要求:实时,准确。三、问题:当前的数据库架构或者设计在后期就会出现它的疲态。比如,当前有一亿条数据,这些数据分为A类,B类,C类等等...
分类:
其他好文 时间:
2014-12-23 19:12:21
阅读次数:
176
要求:两台Web服务器实现数据同步(我这里使用的是Centos 6.2-x64) 服务器一:172.16.11.126 服务器二:172.16.11.127 一、配置ssh备份源172.16.11.126(这里推荐使用专用的普通用户,注意相应的权限问题,如遇特殊...
分类:
其他好文 时间:
2014-12-20 19:44:50
阅读次数:
265
/** * 多线程共享数据 * 线程同步:多个线程在同一个时间段只能有一个线程执行其指定代码,其他线程要等待此线程完成之后才可以继续执行。 * 多线程共享数据的安全问题,使用同步解决。 * 线程同步两种方法: * 1.同步代码块 * synchronized(要同步的对象){ 要同步的操作...
分类:
编程语言 时间:
2014-12-19 22:00:24
阅读次数:
193
由于目前线上的两台NFS服务器,一台为主,一台为备。主到备的数据同步,靠rsync来做。由于数据偏重于图片业务,并且还是千万级的碎图片。在目前的业务框架下,NFS服务是存在单点的,并且数据的同步也不能做完全实时性,从而导致不能确保一致性。因此,出于对业务在线率和数据安..
分类:
其他好文 时间:
2014-12-19 19:22:51
阅读次数:
415
背景线上有很多的数据库在运行,后台需要一个分析用户行为的数据仓库。目前比较流行的是mysql和hadoop平台。现在的问题是,如何将线上的mysql数据实时的同步到hadoop中,以供分析。这篇文章就是利用tungsten-replicator来实现。环境由于tungsten-replicator依...
分类:
数据库 时间:
2014-12-18 21:56:29
阅读次数:
714
在一个场景中,需要从Solaris SPARC将数据库迁移到Linux X86-64,同时,数据库版本从原有的oracle 9i(9.2.0.5)升级到11g(11.2.0.4)使用OGG的数据同步功能,停机时间的长短主要取决于旧应用断开和新应用对外提供访问之间的切换时间。升级步骤如下:1. 目标端...
分类:
数据库 时间:
2014-12-18 18:15:06
阅读次数:
275
本案例仅适用于HDFS与MySQL之间的数据同步实现。
1、 在编译安装之前注意将release下面的setSharePath方法中的路径改为你自己的安装路径,笔者的为/home/woody/datax/libs.
2、 rpm打包之前,要修改*.spec文件中的路径,dataxpath,此外可能还需要注解掉部分赋值文件的代码,如cp –r ${OLDPWD}****.propertie...
分类:
数据库 时间:
2014-12-12 16:43:30
阅读次数:
1838