GlusterFS是Scale-Out存储解决方案Gluster的核心，它是一个开源的分布式文件系统，具有强大的横向扩展能力，通过扩展能够支持数PB存储容量和处理数千客户端。GlusterFS借助TCP/IP或InfiniBandRDMA网络将物理分布的存储资源聚集在一起，使用单一全局命名空间来管理数据。
分类：
其他好文 时间：
2019-03-21 15:47:01
阅读次数：
142
1.什么是Hadoop 管理网络中跨多台计算机存储的文件系统称为分布式文件系统面临的挑战：使文件系统能容忍节点故障且不丢失任何数据不适合的特点：低时间延迟的数据访问&大量的小文件&多用户写入，任意修改文件 2. HDFS的概念元数据hdfs的目录结构及每一个文件的块信息（块的ID,块的副本数量，块的 ...
分类：
其他好文 时间：
2019-03-16 09:39:18
阅读次数：
231
Hadoop是Apache软件基金会所开发的并行计算框架与分布式文件系统。最核心的模块包括Hadoop Common、HDFS与MapReduce。 HDFS HDFS是Hadoop分布式文件系统（Hadoop Distributed File System）的缩写，为分布式计算存储提供了底层支持。 ...
分类：
其他好文 时间：
2019-03-15 19:05:06
阅读次数：
151
本次环境的搭建参考了 https://blog.csdn.net/qq_43455410/article/details/84797814， 感谢博主。 主要流程如下： 3.docker run -tid --name storage -v ~/storage_data:/fastdfs/stora ...
分类：
其他好文 时间：
2019-03-11 10:41:21
阅读次数：
299
client:192.168.4.10 node1 :192.168.4.11 ndoe2 :192.168.4.12 node3 :192.168.4.13 1.块存储 应用案例（真机访问） rbd池子\镜像共享盘 块存储 Filesystem KRBD Kernel ceph 要求： Ceph创 ...
分类：
其他好文 时间：
2019-03-07 17:53:43
阅读次数：
204
HDFS分布式文件系统 环境准备： 1.安装java环境 2.配置/etc/hosts 3.配置ssh信任关系（NameNode) 配置文件 (参考 : https://hadoop.apache.org/docs/r2.7.6/） 环境配置文件 /usr/local/hadoop/etc/hado ...
分类：
其他好文 时间：
2019-02-28 18:45:41
阅读次数：
148
分布式存储已经研究很多年，但直到近年来，伴随着谷歌、亚马逊和阿里等互联网公司云计算和大数据应用的兴起，它才大规模应用到工程实践中。如谷歌的分布式文件系统GFS、分布式表格系统googleBigtable，亚马逊的对象存储AWS，阿里的TFS等都是很好的代表，同时也催生了一大批优秀的开源分布式存储系统，包括ceph、swift、Lustre和glusterfs等。分布式存储系统分布式存储按其存储接口
分类：
其他好文 时间：
2019-02-27 20:41:33
阅读次数：
235
原文链接 云计算最初是实现资源管理的灵活性 云计算不光管资源，也要管应用 大数据拥抱云计算 数据的收集 数据的传输：基于硬盘的分布式队列 数据的存储：分布式文件系统 数据的分析：分布式计算的方法 人工智能拥抱大数据 推理、 知识教授、 基于统计的知识自学（事物间的关联）、 模拟大脑的工作方式（数学单 ...
分类：
其他好文 时间：
2019-02-25 16:45:26
阅读次数：
214
HDFS的探究： HDFS HDFS是 Hadoop Distribute File System的缩写，是谷歌GFS分布式文件系统的开源实现，Apache Hadoop的一个子项目，HDFS基于流数据访问模式的分布式文件系统，支持海量数据的存储，允许用户将百千台组成存储集群，HDFS运行在低成本的 ...
分类：
其他好文 时间：
2019-02-22 12:25:54
阅读次数：
258
