如果说事务控制在数据库中是有时候用到，在普通的文件系统中是偶尔要处理。那么在分布式文件系统中，事务控制是每一个数据操作都要关注的内容。当然，有很多的现成的系统给我们提供了很多的资源。
分布式文件系统是一个快速发展的概念，目前还没有形成类似ORACLE在数据库中的地位，因此，关于这块，参考了一些网络上的内容，泛泛而谈。Hadoop分布式文件系统(HDFS)在JAVA环境中使用相对比较多，用自己的半...
分类：
其他好文 时间：
2015-02-04 18:46:14
阅读次数：
125
分布式文件系统的实现 1 配置数据库节点node5(172.16.21.5) Mysql的cmake编译与安装，详细步步骤参照我的"Mysql的cmake编译与安装博文" [root@node5 ~]# mysql MariaDB [(none)]> create database mogilefs...
分类：
其他好文 时间：
2015-02-03 22:32:54
阅读次数：
353
分布式文件系统的发展很快，在Oracle中，LOB（Large Object，大型对象）类型的字段现在虽然用的没有以前那么多了。但是在一些特殊的场合，需要用它保存一些数据量非常大的业务领域（如图象、档案等），还是有不少的市场。
LOB类型分为BLOB和CLOB两种：BLOB即二进制大型对象（BinaryLarge Object），适用于存贮非文本的字节流数据（如程序、图象、影音等）。而CLO...
分类：
数据库 时间：
2015-02-03 19:38:29
阅读次数：
206
文件分割与合并是一个常见需求，比如：上传大文件时，可以先分割成小块，传到服务器后，再进行合并。很多高大上的分布式文件系统（比如：google的GFS、taobao的TFS）里，也是按block为单位，对文件进行分割或合并。看下基本思路：如果有一个大文件，指定分割大小后（比如：按1M切割）step 1...
分类：
编程语言 时间：
2015-02-02 15:45:16
阅读次数：
265
一.mogilefs简介MogileFS是一个开源的分布式文件系统，用于组建分布式文件集群，由LiveJournal旗下DangaInteractive公司开发，Danga团队开发了包括Memcached、MogileFS、Perlbal等不错的开源项目：(注：Perlbal是一个强大的Perl写的反向代理服务器)。MogileFS由3个部分组成：第..
分类：
其他好文 时间：
2015-02-01 12:16:45
阅读次数：
540
分布式存储系统按照所存储的数据对象不同，分为四类：分布式文件系统（存储图片、音频、视频等非结构化的Blob对象、定长块以及大文件等）、分布式表格系统（存储关系较为复杂的半结构化数据）、分布式键值系统（存储关系简单的半结构化数据）和分布式数据库（存储结构化数据）等。...
分类：
其他好文 时间：
2015-01-31 00:31:16
阅读次数：
176
HDFS分布式文件系统：优点：支持超大文件存储、流式访问、一次写入多次读取。缺点：不适应大量小文件、不适应低时延的数据访问、不适应多用户访问任意修改文件。1.hadoop用于大数据处理，在数据量较小时，并不适用于实时性强的任务，并不是所有的job放到hadoop上，性能都会提升。2.大量小文件的情况...
分类：
其他好文 时间：
2015-01-30 21:00:06
阅读次数：
358
分布式文件系统架构GFS、HDFS、TFS、Haystack
分布式文件系统很多，包括GFS，HDFS，淘宝开源的TFS，Tencent用于相册存储的TFS (Tencent FS，为了便于区别，后续称为QFS)，以及Facebook Haystack。
分布式文件系统通常可以作为底层存储，如GFS作为Google bigtable的底层，EBS作为 Amazon ...
分类：
Web程序 时间：
2015-01-28 21:28:07
阅读次数：
577
1.FastDFS简介(1)FastDFS的功能介绍 FastDFS是一个开源的分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务，如相册网站、视频网站等等。(2)FastDFS的工作原理...
分类：
其他好文 时间：
2015-01-28 21:05:41
阅读次数：
289
转自：http://blog.csdn.net/u014252240/article/details/41810849发布人：南京大学PASA大数据实验室顾荣1. Tachyon是什么Tachyon（/'tæki:??n/ 意为超光速粒子）是以内存为中心的分布式文件系统，拥有高性能和容错能力，能够为...
分类：
其他好文 时间：
2015-01-27 10:53:42
阅读次数：
3558
