场景：三台服务器作用gluster做server又做client端首先保证三台服务器是通的分别配置/etc/hosts10.51.114.230web110.51.116.7web210.51.116.58web3三台服务器每一台都要安装gluster哦#apt-getinstallbison
#apt-getinstallflex
#wgethttp://download.gluster.org/pub/gluster/g..
分类：
系统相关 时间：
2015-08-11 19:04:14
阅读次数：
222
FastDFS是为互联网应用量身定做的一套分布式文件存储系统，非常适合用来存储用户图片、视频、文档等文件。对于互联网应用，和其他分布式文件系统相比，优势非常明显。具体情况大家可以看相关的介绍文档，包括FastDFS介绍PPT等等。出于简洁考虑，FastDFS没有对文件做分块存储，因此不太适合分布式计...
分类：
其他好文 时间：
2015-08-11 18:02:41
阅读次数：
167
1.Google文件系统（GFS）
使用一堆廉价的商用计算机支撑大规模数据处理。
GFSClient： 应用程序的访问接口
Master（主控服务器）：管理节点，在逻辑上只有一个（还有一台“影子服务器“，在主控服务器失效时提供元数据，但并不是完整的热备服务器），保存系统的元数据，负责整个文件系统的管理。
Chunk Server（数据库服务器）：负责具体的存...
分类：
其他好文 时间：
2015-08-10 18:08:04
阅读次数：
219
FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务。（百科）本文详细介绍了FastDFS在centos系统上的详细安装过程，在从机上使用了nginx实现了h...
分类：
其他好文 时间：
2015-08-10 17:33:54
阅读次数：
155
转自：http://www.uml.org.cn/sjjm/201507284.asp1 文档说明研究分布式文件系统时间也不短了，接触过的文件系统也不少，趁着这2014到来之际，花点时间用来总结总结。接触过的文件系统有glusterfs、moosefs、lustre及hdfs等，其架构简单顺带解说一...
分类：
其他好文 时间：
2015-08-10 17:30:53
阅读次数：
202
对于更大量的存储使用MFS分布式存储：服务概述：MFS ：网络分布式文件系统Projectwebsite:http://www.moosefs.com/InstallationandusingMooseFS:http://www.moosefs.org/reference-guide.htmlmooseFS（moose驼鹿）是一款网络分布式文件系统。它把数据分散在多台服务器上，但对..
分类：
其他好文 时间：
2015-08-10 02:12:55
阅读次数：
339
Hadoop是Lucene创始人DougCutting，根据Google的相关内容山寨出来的分布式文件系统和对海量数据进行分析计算的基础框架系统，其中包含MapReduce程序，hdfs系统等。网方网站：http://hadoop.apache.org/Hadoop是一个由Apache基金会所开发的分布式系统基础架构。下载：http://had..
分类：
其他好文 时间：
2015-08-10 02:12:39
阅读次数：
223
前言在Hadoop内部，具体实现了许多类的文件系统，当然最最被我们用到的就是他的分布式文件系统HDFS了。但是本篇文章不会讲HDFS的主从架构等东西，因为这些东西网上和资料书中都讲得很多了。所以，我决定以我个人的学习所得，来讲讲HDFS内部的一些有意思的东西，也作为一个起始点，为后续继续深入其中模块的学习做基础。HDFS两大主流关系模块
与NameNode相关，文件系统元数据操作相关。包括文件目录树...
分类：
其他好文 时间：
2015-08-09 17:09:29
阅读次数：
151
文件系统（FS）Shell包含各种类-Shell的命令，直接和Hadoop分布式文件系统（HDFS）交互，也支持对其他文件系统的支持，例如：本地文件系统FS，HFTP FS，S3 FS，和其他。...
分类：
系统相关 时间：
2015-08-08 15:01:09
阅读次数：
270
简介HDFS（Hadoop Distributed File System ）Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS（Google File System）Google 文件系统（中文，英文）。HDFS有很多特点： ①保存多个副本，且提供容错机制，副本丢失或宕机...
分类：
其他好文 时间：
2015-08-03 16:26:00
阅读次数：
102
