Rsync简介 Rsync是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据同步备份的优秀工具，适用于Unix/Linux/Windows等多种操作系统。 Rsync的特性 Rsync数据备份架构 Rsync常用参数 本地传输 通过远程shell通道传输 通过守护进程进行传输 服务端配 ...
分类：
其他好文 时间：
2017-09-13 00:34:47
阅读次数：
202
一、数据库相关平台主要解决以下三个方面的问题： 为海量前台数据提供高性能、大容量、高可用性的访问 为数据变更的消费提供准实时的保障 高效的异地数据同步 二、数据库中间件有以下几种： 分布式数据库分表分库 数据增量订阅与消费 数据库同步（全量、增量、跨机房、复制） 跨数据库（数据源）迁移 ...
分类：
数据库 时间：
2017-09-09 20:57:18
阅读次数：
160
上一篇中，我们了解了B树，辣么。。B+树又是什么呢？？ 一：定义：B+树是基于B树的，是B树的变形，也是一种多路搜索树。查询性能更加出色。 1.每个父节点元素出现在子节点中，是子节点的最大或最小元素。 2.根节点的最大元素也是B+树中的最大元素 3.所有关键字都在叶子结点出现，包含了全量元素信息。 ...
分类：
其他好文 时间：
2017-09-08 21:53:48
阅读次数：
153
1.测试sqoop任务1.1 测试全量抽取1.1.1.直接执行命令1.1.2.以shell文件方式执行sqoop或hive任务1.2 测试增量抽取2.测试hive任务3.总结 当前生产上的任务主要分为两部分:sqoop任务和hive计算任务,测试这两种任务,分别以shell文件和直接执行命令的方式来... ...
分类：
其他好文 时间：
2017-08-31 01:01:21
阅读次数：
327
某天工作时间，一个二货犯晕登错生产当测试环境了，直接drop了一个数据库,需要紧急恢复!可利用备份的数据文件以及增量的binlog文件进行数据恢复。具体思路归纳几点：1、恢复条件为MySQL要开启binlog日志功能，并且要全备和增量的所有数据。2、恢复时建议对外停止更新，即禁止更..
分类：
数据库 时间：
2017-08-29 18:47:49
阅读次数：
270
svn备份一般采用三种方式：1）svnadmin dump 2)svnadmin hotcopy 3)svnsync. 优缺点分析： 第一种svnadmin hotcopy只能进行全量拷贝，不能进行增量备份； 优点：备份过程较快，灾难恢复也很快；如果备份机上已经搭建了svn服务，甚至不需要恢复，只需 ...
分类：
其他好文 时间：
2017-08-29 16:00:36
阅读次数：
272
Visual Studio 2017 Enterprise 更新至 15.3.2 ，本安装包使用微软原版安装文件，配合layout指令全量下载后制作，内置中文语言包，包含 Visual Studio 2017 企业版全部功能所需安装包，2017年8月25日更新。 下载地址： magnet:?xt=u ...
分类：
其他好文 时间：
2017-08-26 10:18:18
阅读次数：
189
ehcache3的evict策略不可设置，只能通过eviction-advisor建议evict，但这种建议得不到保证且低效。ehcache3的evict策略其实是一种基于样本的LRU算法，即在全量数据中采集一定数量样本（默认为8），在样本集中选取lastAccessTime最小的进行evict。 ...
分类：
系统相关 时间：
2017-08-24 18:02:30
阅读次数：
232
1、业务需求 由于业务不同步的原因，导致用户管理侧oracle和139邮箱侧mysql的用户状态不一致，现在需要以用户管理侧为准，除却添加同步的程序之外，需要进行139邮箱一侧的数据的更新。 包括的内容是在139的插入不存在的用户，更新和用管侧不一样的属性。 初期的步骤，以csv格式获取139全量的 ...
分类：
数据库 时间：
2017-08-21 13:31:25
阅读次数：
216
rsync是一款开源的、快速的、多功能的、可实现全量及增量的本地或远程数据同步备份工具。适用于unix/linux/windows等多种操作系统平台。 两台机器拷贝数据scp，nfs(linux之间),sftp,http,samba(linux与windows之间)，rsync,drbd(基于文件系 ...
分类：
其他好文 时间：
2017-08-20 10:03:28
阅读次数：
166
