FastDFS是一个开源的轻量级分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务。（百科）本文详细介绍了FastDFS在centos系统上的详细安装过程，在从机上使用了nginx实现了h...
分类：
其他好文 时间：
2015-08-10 17:33:54
阅读次数：
155
转自：http://www.uml.org.cn/sjjm/201507284.asp1 文档说明研究分布式文件系统时间也不短了，接触过的文件系统也不少，趁着这2014到来之际，花点时间用来总结总结。接触过的文件系统有glusterfs、moosefs、lustre及hdfs等，其架构简单顺带解说一...
分类：
其他好文 时间：
2015-08-10 17:30:53
阅读次数：
202
对于更大量的存储使用MFS分布式存储：服务概述：MFS ：网络分布式文件系统Projectwebsite:http://www.moosefs.com/InstallationandusingMooseFS:http://www.moosefs.org/reference-guide.htmlmooseFS（moose驼鹿）是一款网络分布式文件系统。它把数据分散在多台服务器上，但对..
分类：
其他好文 时间：
2015-08-10 02:12:55
阅读次数：
339
Hadoop是Lucene创始人DougCutting，根据Google的相关内容山寨出来的分布式文件系统和对海量数据进行分析计算的基础框架系统，其中包含MapReduce程序，hdfs系统等。网方网站：http://hadoop.apache.org/Hadoop是一个由Apache基金会所开发的分布式系统基础架构。下载：http://had..
分类：
其他好文 时间：
2015-08-10 02:12:39
阅读次数：
223
前言在Hadoop内部，具体实现了许多类的文件系统，当然最最被我们用到的就是他的分布式文件系统HDFS了。但是本篇文章不会讲HDFS的主从架构等东西，因为这些东西网上和资料书中都讲得很多了。所以，我决定以我个人的学习所得，来讲讲HDFS内部的一些有意思的东西，也作为一个起始点，为后续继续深入其中模块的学习做基础。HDFS两大主流关系模块
与NameNode相关，文件系统元数据操作相关。包括文件目录树...
分类：
其他好文 时间：
2015-08-09 17:09:29
阅读次数：
151
文件系统（FS）Shell包含各种类-Shell的命令，直接和Hadoop分布式文件系统（HDFS）交互，也支持对其他文件系统的支持，例如：本地文件系统FS，HFTP FS，S3 FS，和其他。...
分类：
系统相关 时间：
2015-08-08 15:01:09
阅读次数：
270
简介HDFS（Hadoop Distributed File System ）Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS（Google File System）Google 文件系统（中文，英文）。HDFS有很多特点： ①保存多个副本，且提供容错机制，副本丢失或宕机...
分类：
其他好文 时间：
2015-08-03 16:26:00
阅读次数：
102
网络文件系统（NetworkFileSystem，NFS）是一种分布式文件系统协议，最初由SunMicrosystems公司开发，并于1984[1]年发布。其功能旨在允许客户端主机可以像访问本地存储一样通过网络访问服务器端文件。NFS和其他许多协议一样，是基于OpenNetworkComputingRemoteProcedureCall(ON..
分类：
其他好文 时间：
2015-08-02 23:40:21
阅读次数：
404
Hadoop分布式文件系统即Hadoop Distributed FileSystem。 当数据集的大小超过一台独立的物理计算机的存储能力时，就有必要对它进行分区（Partition）并存储到若干台单独的计算机上，管理网络中跨越多台计算机存储的文件系统成为分布式文件系统（Distributed F....
分类：
其他好文 时间：
2015-08-02 16:38:18
阅读次数：
131
如何关闭安全模式呢？
bin/hadoop
dfsadmin
-safemode leave
原因:
在分布式文件系统启动的时候，开始的时候会有安全模式，当分布式文件系统处于安全模式的情况下，文件系统中的内容不允许修改也不允许删除，直到安全模式结束。安全模式主要是为了系统启动的时候检查各个DataNode上数据块的有效性，同时根据策略必要的复制或者删除部分数据块。运行期...
分类：
其他好文 时间：
2015-07-31 13:10:33
阅读次数：
195
