数据库的作用:数据库就是用来管理大量数据的:数据的存储与结构的定义,数据的访问方法,数据的安全(连接安全,访问安全,崩溃安全)数据管理技术的发展:人工管理,文件系统,数据库系统关系型数据库
分类:
数据库 时间:
2014-07-24 21:22:06
阅读次数:
219
#rpm--importhttp://elrepo.org/RPM-GPG-KEY-elrepo.org
#rpm-Uvhhttp://www.elrepo.org/elrepo-release-6-6.el6.elrepo.noarch.rpm
#yumupdate
#yuminstallkmod-reiserfsreiserfs-utils
#modprobereiserfs
分类:
其他好文 时间:
2014-07-24 17:54:37
阅读次数:
238
Hadoop MapReduce思维模式转变的催化剂是大量新技术的诞生,它们能够处理大数据分析所带来的3个V的挑战。扎根于开源社区,Hadoop已经是目前大数据平台中应用率最高的技术,特别是针对诸如文本、社交媒体订阅以及视频等非结构化数据。除分布式文件系统之外,伴随Hadoop一同出现的还有进行大数...
分类:
其他好文 时间:
2014-07-24 17:00:47
阅读次数:
263
《大 数据技术丛书:Hadoop应用开发技术详解》共12章。第1~2章详细地介绍了Hadoop的生态系统、关键技术以及安装和配置;第3章是 MapReduce的使用入门,让读者了解整个开发过程;第4~5章详细讲解了分布式文件系统HDFS和Hadoop的文件I/O;第6章分析了 MapReduce的工...
分类:
其他好文 时间:
2014-07-24 11:25:42
阅读次数:
337
最近在写一些hadoop的运维工具,考虑到hadoop本身是java编写的,api比较方便,可以直接拿来就用准备用java来写。今天测试了几个fs相关的类。主要有FileStatus,FileSystem,DistributedFileSystem,DatanodeInfo,BlockLocationFileStatus是和文件的属性相关的类,比如文件的名称,..
分类:
编程语言 时间:
2014-07-24 10:49:36
阅读次数:
303
mount()的最后一个参数data是传给文件系统解释的,有兴趣可以跟踪一下系统调用mount的流程(以vfat为例):sys_mount()-->do_mount()-->do_add_mount()-->do_kern_mount()-->do_kern_mount()-->get_sb_bde...
分类:
其他好文 时间:
2014-07-24 10:18:13
阅读次数:
281
每个项目的都有各自的场景,但是其实往小处说,场景的处理基本都是很相似,之前做copy文件的程序,其实就是一种很常见的ETL的过程(转移文件,异构系统通过文件系统交换数据,存在数据同步)。了解一下ETL:就是数据转移的一个处理过程(A库与B库之间进行数据抽取)---最重要就是格式的转换。了解一下ESB...
分类:
其他好文 时间:
2014-07-24 09:45:22
阅读次数:
256
我们平常对磁盘分区格式化的时候有时无法格式化,报告的信息为:“/dev/sdb3isapparentlyinusebythesystem;willnotmakeafilesystemhere!”意思是说:似乎系统正在使用该设备,无法创建文件系统。使用【mount】查看系统的所有挂载设备,也没有:/dev/sdb3.但是,创建文件系统的时..
分类:
其他好文 时间:
2014-07-23 21:30:46
阅读次数:
654
一、mysql备份类型1、按照mysql服务器状态cold离线备份,读、写操作均中止warm仅可执行读操作hot读、写操作不受影响2、按照数据一致性consistentinconsistent3、按照备份数据格式logical备份sql语句,在恢复的时候执行备份的sql语句实现数据库数据的重现physical文件系统层面直..
分类:
数据库 时间:
2014-07-23 21:16:27
阅读次数:
287
一个简单的文件系统过滤驱动,抛去了大部分细节,留下了一个简单的框架,其实文件系统过滤驱动蛮简单的,很多接口可以不用实现,只要知道大致流程,其它都将会很清晰。...
分类:
其他好文 时间:
2014-07-23 17:20:31
阅读次数:
356