GoldenGate作为Oracle公司大力发展的核心战略产品，在高可用、容灾、数据抽取转换方面扮演着越来越重要的作用。goldengate可以做什么，说起来真的太多了，高可用、容灾、Real-Time数据同步，如果你做过BI，一定知道ETL的工具(datastage、infomatica等)，goldengate也可以做，而..
分类：
数据库 时间：
2014-07-21 12:11:24
阅读次数：
473
为了将N个前端数据同步，通过Memcached完成数据打通，但带来了一些新问题：使用iBatis整合了Memcached，iBatis针对每台server生成了唯一标识，导致同一份数据sql会产生不同的key，造成重复缓存。——通过重写iBatis部分原码，终止了唯一标识的生成，同一个SQL产生同一...
分类：
其他好文 时间：
2014-07-19 21:06:50
阅读次数：
207
公司的solr线上服务器，分成差不多是个core给不同的部门不同的业务需求来使用。我接手以来，问题多多，烦扰多多。有不少问题亟待解决，首当其冲的是搜索准确度、数据同步。搜索准确度已经通过改用ansj分词器和不断优化的个人词库和停用词库来解决，这是个不断优化的过程，需要长时间的跟进才有明显效果。第二个...
分类：
其他好文 时间：
2014-07-19 15:19:33
阅读次数：
846
一、远程文件复制将本地主机上的文件实时同步到远程主机上，保证文件或目录内容一致，如Linux常用的rsync就是这类工具，它可监视文件系统的动作，将变化同步到远程主机，只复制变化的内容，对于大文件非常有用，可节省带宽资源，提高效率。二、远程磁盘（卷）镜像存储级的数据..
分类：
其他好文 时间：
2014-07-19 02:41:26
阅读次数：
213
首先建立站点，httpd或nginx都可，我的站点根目录指向“/var/www/centos/”然后下载源，并同步源rsync-avrtrsync://mirrors.ustc.edu.cn/centos/6.5/updates/x86_64//opt/centos/other/updates/rsync-avrtrsync://mirrors.ustc.edu.cn/centos/6.5/extras/x86_64//opt/centos/ot..
分类：
其他好文 时间：
2014-07-19 02:23:45
阅读次数：
162
一个网站，除了有数据库，还有很多别的文件，比如用户上传的图片，你的网站代码之类，光有数据库而没有这些文件你的网站也没法跑起来。
和数据库比起来，网站文件要大得多，而且文件数目也多得多，要做到实时同步必须考虑“增量文件同步”，一般传统的方法是使用 inotify + rsync 写脚本来操作。...
分类：
Web程序 时间：
2014-07-18 23:02:58
阅读次数：
262
是不是经常要分析用户的行为？是不是经常遇到多台server上传的日志一起分析？是不是对数据统计的间隔时间要求非常短？还有木有由于日志文件过大，而须要分块处理？1、说明一点在日志写入的时候必须依照一种严格的格式，这样在做解析的时候，才好分割。比方 gameid：123 gameid：2333。分割统一...
分类：
数据库 时间：
2014-07-18 09:33:58
阅读次数：
337
Oracle GoldenGate (以下简称ogg)在异种os上同种db之间的数据同步。...
分类：
数据库 时间：
2014-07-17 10:22:56
阅读次数：
353
在前面的博文实践记录之-Rsync镜像备份介绍了镜像备份工具Rsync的安装和使用．但在大数据时代，rsync的不足之处也暴露出来．首先．rsync本身实现不了实时备份．靠系统的crontab实现的话也受限于1分钟．因此这就导致了服务端和客户端数据可能出现不一致，更无法在应用故障时做到..
分类：
其他好文 时间：
2014-07-16 16:44:36
阅读次数：
391
# yum install rpm-build# wget http://rsync.samba.org/ftp/rsync/rsync-3.0.9.tar.gz# vim rsync.specName:rsyncVersion:3.0.9Release: 1%{?dist}Summa...
分类：
其他好文 时间：
2014-07-16 15:57:59
阅读次数：
187
