FastDFS介绍： FastDFS是用c语言编写的一款开源的分布式文件系统。FastDFS为互联网量身定制，充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标。 FastDFS功能： 文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题。特别 ...
分类：
其他好文 时间：
2018-04-12 23:28:26
阅读次数：
254
MFSMooseFS 文件系统 可以实现RAID 功能；节约成本 实现在线扩展；是一种半分布式文件系统。 一、MFS文件系统的组成 1、mfsmaster 元数据服务器。 在整个体系中负责管理管理文件系统，目前MFS只支持一个元数据服务器master，这是一个单点故障，需要一个性能稳定的服务器来充当 ...
分类：
其他好文 时间：
2018-04-11 15:53:56
阅读次数：
189
接着上一篇Centos7下GlusterFS分布式存储集群环境部署记录文档，继续做一些补充记录，希望能加深对GlusterFS存储操作的理解和熟悉度。 清理glusterfs存储环境 dd命令创建虚拟分区，创建存储目录 创建分布式卷（即Hash卷）及其相关管理操作 ...
分类：
其他好文 时间：
2018-04-10 13:43:45
阅读次数：
369
下面是在GlusterFS学习中总结的管理手册，希望这些能够对那些也是使用研究 GlusterFS 的人有些许的帮助。 1）管理说明 2）系统部署 3）基本系统管理 3.1）节点管理 3.2）卷管理 3.3）Brick 管理 4）GlusterFS系统扩展维护 4.1）系统配额 4.2）地域复制(g ...
分类：
其他好文 时间：
2018-04-09 13:24:01
阅读次数：
174
前言：前面我们学习过NFS，以及虚拟化课程的时候我们学习过openfiler，这两个都是属于存储服务器。但是他们有着共同的缺点，就是性能不好，因为都是通过共享方式共享一个存储空间，使得服务器不堪重负，会出现超时的问题，而且存在着单点故障问题，尽管可以用rsync同步数据到另外一台服务器上做备份，但性能方便没有任何提升。而分布式文件系统把数据分散存储在不同的服务器上，读取数据的时候相当于同时读取，不
分类：
其他好文 时间：
2018-04-08 12:12:47
阅读次数：
204
视频课程24G包含： 基础篇视频教程：Dubbo视频教程、使用maven构建dubbo服务、linux、构建dubbo服务消费、持续集成篇；高级篇视频教程：基于dubbo的分布式系统架构、activemq、redis、fastdfs分布式文件系统、dubbo服务集群；高可用架构篇视频教程：zooke ...
分类：
其他好文 时间：
2018-04-07 17:35:40
阅读次数：
279
一、HDFS伪分布式环境搭建Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。HDFS放宽了一部分POSIX约束，来实
分类：
其他好文 时间：
2018-04-07 12:51:45
阅读次数：
183
Hadoop的两大功能：海量数据存储和海量数据分析 Hadoop2的三大核心组件是：HDFS、MapperReducer和yarn 1、HDFS：分布式文件系统海量数据存储 2、MapperReducer：运算框架，海量数据分析 3、yarn：资源调度管理集群 HDFS工作机制：基于namenode ...
分类：
其他好文 时间：
2018-04-07 12:51:32
阅读次数：
115
Hadoop自带HDFS，即 Hadoop Distributed FileSystem（不是HaDoop FileSystem 的简称） 适用范围 超大文件：最新的容量达到PB级 流式数据访问：HDFS的构建思路：一次写入、多次读取时最高效的访问模式 低时间延迟的数据访问不适用HDFS 大量的小文 ...
分类：
其他好文 时间：
2018-04-07 11:28:21
阅读次数：
136
1、在window操作系统上，使用eclipse开发工具从hdfs分布式文件系统上下载文件报空指针异常解决方法： 2、将hadoop-2.5.0-cdh5.3.6.tar.gz文件在window操作系统解压缩，配置好环境变量。 然后验证一下是否配置成功，操作如window+R，输入cmd： 然后将如 ...
分类：
编程语言 时间：
2018-04-06 18:37:50
阅读次数：
235
