rsync简介优点:rsync具有安全性高、备份迅速、支持增量备份等优点,通过rsync可以解决对实时性要求不高的数据备份需求,例如定期的备份文件服务器数据到远端服务器,对本地磁盘定期做数据镜像等。缺点:rsync同步需要扫描所有文件进行对比,当文件非常大时,会消耗很多资源和..
分类:
其他好文 时间:
2014-08-23 19:09:32
阅读次数:
306
希尔排序分析:
最优时间复杂度:O(n) 顺序的情况下
最坏时间复杂度:O(nlog^2n)
平均时间复杂度:根据增量不同而不同
最坏空间复杂度:O(n)
稳定性:不稳定...
分类:
其他好文 时间:
2014-08-22 16:26:49
阅读次数:
137
数据库备份类型一、热备份温备份冷备份热备份:数据读写不受影响温备份:仅可以执行读操作冷备份:离线备份、读写均终止二、物理备份逻辑备份物理备份:复制数据文件逻辑备份:将数据导出成文本文件三、完全备份增量备份差异备份完全备份:备份所有数据增量备份:仅备份上次完..
分类:
数据库 时间:
2014-08-22 11:00:16
阅读次数:
232
需求
将Oracle中的业务基础表增量数据导入Hive中,与当前的全量表合并为最新的全量表。
设计
涉及的三张表:
全量表:保存了截止上一次同步时间的全量基础数据表
增量表:增量临时表
更新后的全量表:更新后的全量数据表
步骤:
通过Sqoop将Oracle中的表导入Hive,模拟全量表和增量表
通过Hive将“全量...
分类:
数据库 时间:
2014-08-21 19:22:14
阅读次数:
455
可能有不少朋友遇到过这样的问题: update或delete语句忘带了where子句,或where子句精度不够,执行之后造成了严重的后果,这种情况的数据恢复只能利用事务日志的备份来进行,所以如果你的SQL没有进行相应的全库备份或不能备份日志(truncate log on checkpoint选项为...
分类:
数据库 时间:
2014-08-21 14:41:14
阅读次数:
304
MySQL大表备份是一个我们常见的问题,下面就为您介绍一个MySQL大表备份的简单方法,希望对您学习MySQL大表备份方面能有所帮助。这里所说的大表是超过4G以上的表,我目前见到过最大为60多G的单表,对于这种表每天一个全备可以说是一件很痛苦的事。那么有没有办法,可以实现一个全备加增量的备份呢。答案...
分类:
数据库 时间:
2014-08-21 14:38:24
阅读次数:
345
这个需求比较冷门,但对于在某些特定的情况下,还是会有这样的需要的。好在Oracle实现还比较方便,用存储过程则轻松实现。 查询字符串:create or replace procedure search_string(pString in varchar) as cursor all_tab...
分类:
数据库 时间:
2014-08-21 13:14:34
阅读次数:
534
软件工程--开发模型目录瀑布模式螺旋模型快速原型模式增量模式喷泉模型演化模型瀑布模式特点:阶段间具有顺序性和依赖性:前一阶段完成后,才能开始后一阶段前一阶段的输出文本为后一阶段的输入文本推迟实现的观点质量保证:每个阶段必须交付出合格的文档对文档进行审核缺点:开始需..
分类:
其他好文 时间:
2014-08-21 11:40:44
阅读次数:
210
Scrum 学习笔记敏捷火了非常长一段时间了,可是一直没有机会实践,如今開始组队实践了,哈哈,先好好研习下规则~~什么是 scrumScrum是一个敏捷开发框架,是一个增量的、迭代的开发过程。在这个框架中,整个开发周期包含若干个小的跌代周期,每一个小的的跌代周期称为一个 Sprint,每一个 Spr...
分类:
其他好文 时间:
2014-08-20 20:49:22
阅读次数:
294
Red Hat发布了Red Hat Enterprise Linux 6,这是近3年来最主要的一次更新。上一个主要版本RHEL 5是2007年5月发布的,使用的是2.6.18内核,虽然增量更新增加了许多内核更新和新特性,但RHEL 5也开始迈入老年。不过我们也不用担心,RHEL 5承诺有10年的维护...
分类:
系统相关 时间:
2014-08-20 15:45:02
阅读次数:
394