backup服务器之rsync服务 rsync是开源的、快速的、多功能的可实现全量及增量的本地或远程数据同步备份的优秀工具。它拥有scp、cp的全量复制功能，同时比scp、cp命令更优秀、更强大。通过它独特的“quick check”算法，仅同步大小或者最后修改时间发生变化的文件或目录，同样也可以根 ...
分类：
其他好文 时间：
2017-03-10 16:27:01
阅读次数：
223
rsync：备份服务和scp差不多但是不同的是rsync是增量备份而scp是全量备份，更加节省磁盘。（备份服务器（数据库文件，全网重要文件））好处：增量备份缺点：大文件传输存在瓶颈---------------------------------------------------------------------------------------------..
分类：
其他好文 时间：
2017-03-08 16:47:54
阅读次数：
377
hive中拉链表在有些情况下，为了保持历史的一些状态，需要用拉链表来做，这样做目的在可以保留所有状态的情况下可以节省空间。拉链表适用于以下几种情况吧数据量有点大，表中某些字段有变化，但是呢变化的频率也不是很高，业务需求呢又需要统计这种变化状态，每天全量一份呢，..
分类：
其他好文 时间：
2017-03-01 21:48:46
阅读次数：
266
控制文件中的SCN 数据文件头的SCN 数据块中的SCN 日志文件头中的SCN 事务SCN 内存中的SCN 一 控制文件中的SCN 1.1 数据库SCN 数据库SCN表示最近一次全量checkpoint操作时的SCN SQL> select checkpoint_change# from v$dat... ...
分类：
数据库 时间：
2017-02-15 16:31:59
阅读次数：
278
NFS重要问题 1、有关NFS客户端普通用户写NFS的问题。 1）为什么要普通用户写NFS。 2）exports加all_squash。 Rsync介绍 什么是Rsync？ Rsync是一款开源的、快速的、多功能的、可实现全量即增量的本地或远程数据同步备份的优秀工具。Rsync软件适用于unix、l... ...
分类：
其他好文 时间：
2017-02-09 23:01:35
阅读次数：
248
相关名词解释:全量:全量数据就是数据库中所有的数据，全量备份就是把数据库中所有的数据进行备份。增量:增量数据是从上次全量备份之后，更新的新数据。(binlog就是增量数据)譬如：上次全量备份时间是2017/01/02，那么之后产生的binlog日志就是增量数据(mysql-bin.000024)举例说..
分类：
数据库 时间：
2017-01-17 22:02:08
阅读次数：
182
目标： 1.传入3个参数:源文件路径，目标文件路径，md5文件 2.每周一实现全量备份，其余时间增量备份 1.通过传入的路径，获取该路径下面的所有目录和文件(递归) 方法一：使用os.listdir 代码如下： ?运行代码，效果如下： 方法二：使用os.walk 代码如下： ?运行代码，测试效果 2 ...
分类：
编程语言 时间：
2017-01-09 18:48:16
阅读次数：
602
转自：http://blog.chinaunix.net/uid-27105712-id-5612512.html 一、使用背景 先说一下需要用到向量时钟的场景。我们在写数据时候，经常希望数据不要存储在单点。如db1，db2都可以同时提供写服务，并且都存有全量数据。而client不管是写哪一个db都 ...
分类：
编程语言 时间：
2017-01-04 12:47:24
阅读次数：
214
一、Rsync简介1.1什么是RsyncRsync是一款快速的，开源的，多功能的，可以实现全量和增量的远程和本地的数据同步和数据备份的工具。全量的概念是：全部备份。增量的概念是：差异化备份。对上一次基础上，对更新的部分作备份。1.1.2Rsync简介Rsync具有可以使本地和远程的两台主机..
分类：
其他好文 时间：
2016-12-27 01:39:11
阅读次数：
243
