云数据库Redis版是兼容Redis协议标准的、提供持久化的缓存式数据库服务，基于高可靠双机热备架构；全新推出的256M小规格款，适用于高QPS、小数据量业务，并支持免费全量迁移，完美服务于个人开发者和初创企业。 云数据库Redis版256M双机热备款首发优惠购，只需99元/年。 活动地址： pro ...
分类：
数据库 时间：
2017-04-12 03:45:06
阅读次数：
250
现在很多公司都开始使用es来做搜索，我们公司目前也有好几个业务部门在用，我主要做商户搜索，为业务部门提供基础支持。上周把呼叫中心的搜索重新整理了下，在新增几个字段后，全量同步发现通过拼音首字母搜索无法搜索出来了，最后发现是词库地址变更，导致分词出现了问题。 我整理了下es的搜索分词插件和流程，如下： ...
分类：
其他好文 时间：
2017-04-11 12:07:23
阅读次数：
244
一、实验目标 利用kettle实现从mysql数据库中的dbf库批量同步表到dbm库（全量同步） 二、实验环境 dbf 库中表f1、f2、f3 。f1中1条数据，f2中100条数据，f3中2条数据。 dbm库中表f1、f2、f3 。f1、f2、f3都为空表。 f1、f2、f3表结构一样如下： CRE ...
分类：
其他好文 时间：
2017-04-06 16:28:11
阅读次数：
160
1、rsync介绍rsync是一个开源的，快速的，多功能的，可实现全量及增量的本地或远程数据同步备份的优秀工具，rsync软件适用于nunix/linux/windows多操作系统上运行。官方网站：http://www.samba.org/ftp/rsync/rsync.htmlrsync 英文全称 ...
分类：
系统相关 时间：
2017-04-05 10:02:14
阅读次数：
175
Rsync+Sersync实时同步一、基本介绍1.什么是Rsync？Rsync（RemoteSynchronize）是一款开源的、快速的、多功能的、可以实现全量及增量的本地或远程数据同步备份的优秀工具，并且支持多种操作系统平台运行。官网文档：https://rsync.samba.org/ftp/rsync/rsync.html2.Rsync简介Rs..
分类：
其他好文 时间：
2017-03-30 20:04:33
阅读次数：
183
Rsync+inotify实现实时同步一、基本介绍1、什么是Rsync？Rsync（RemoteSynchronize）是一款开源的、快速的、多功能的、可以实现全量及增量的本地或远程数据同步备份的优秀工具，并且支持多种操作系统平台运行。官网文档：https://rsync.samba.org/ftp/rsync/rsync.html2、Rsync..
分类：
其他好文 时间：
2017-03-29 14:44:46
阅读次数：
392
场景 Redis实例A > Redis实例B,整库全量迁移 方案一： mac环境 brew install npm npm install redis-dump -g 针对RedisA: redis-dump -h host1 -p 6379 -d 1 --json > mydb.json针对Red ...
分类：
其他好文 时间：
2017-03-29 00:48:09
阅读次数：
235
目录目录
快照与备份的区别
Snapshot 快照技术
全量快照
增量快照
COW 写时拷贝快照技术
ROW 写时重定向快照技术快照与备份的区别传统地, 人们一直采用数据复制、备份、恢复等技术来保护重...
分类：
其他好文 时间：
2017-03-24 19:27:38
阅读次数：
464
最近公司系统中全模糊查询很多，数据量又大，多表连接查询时会很影响性能。于是考虑使用搜索引擎来做全模糊查询，思路：mysql数据库数据同步至ES类型，同步采用全量同步+定时增量方式，应用直接从ES中去查询想要的结果。通过一番查找，决定使用elasticsearch-jdbc进行数据的同..
分类：
数据库 时间：
2017-03-16 22:58:28
阅读次数：
916
转载自云享团 因为近期遇到用户在做ETL操作导入数据到MaxCompute的时候，对如何设置数据同步策略有疑惑，所以今天第一波我们来聊一下数据的同步策略，根据数据的特性，看看哪些数据适合增量同步，哪些适合全量同步，又是如何实现的？请认真看完下面的介绍，这些问题都不是事儿。 ...
分类：
其他好文 时间：
2017-03-16 18:32:30
阅读次数：
319
