1.GFS介绍
GFS简要说明,它有两种:
1.Google文件系统:GFS是GOOGLE实现的是一个可扩展的分布式文件系统,用于大型的、分布式的、对大量数据进行访问的应用。它运行于廉价的普通硬件上,但可以提供容错功能。它可以给大量的用户提供总体性能较高的服务。欲了解更多,可以访问..
分类:
系统相关 时间:
2016-11-10 07:51:24
阅读次数:
241
1.GFS介绍 GFS简要说明,它有两种: 1. Google文件系统:GFS是GOOGLE实现的是一个可扩展的分布式文件系统,用于大型的、分布式的、对大量数据进行访问的应用。它运行于廉价的普通硬件上,但可以提供容错功能。它可以给大量的用户提供总体性能较高的服务。欲了解更多,可以访问:http:// ...
分类:
系统相关 时间:
2016-11-10 02:13:04
阅读次数:
306
Moosefs分布式存储第一部分:原理讲解首先,我们熟悉的百度网盘就是分布式文件系统的一个例子,百度用来做存储的。MFS特性:1.Free(GPL)2.通用文件系统,不需要修改上层应用就可以使用3.可以在线扩容,体系架构可伸缩性极强。4.部署简单。5.高可用,可设置任意的文件冗余程度(..
分类:
其他好文 时间:
2016-11-07 20:22:28
阅读次数:
319
准备工作 1、安装IBA 2、配置IPOIB 修改完配置之后,需要重启ib0 ib0无法识别 3、配置hosts 安装glusterfs-3.6.71、下载glusterfs-3.6.72、 3、打包后,放在 目录下。4、 或 生成包。5、将Centos自带的glusterfs-3.6.0(卸载) ...
分类:
其他好文 时间:
2016-11-02 09:50:28
阅读次数:
339
Hadoop历史 雏形开始于2002年的Apache的Nutch,Nutch是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。 随后在2003年Google发表了一篇技术学术论文谷歌文件系统(GFS)。GFS也就是google File Sy ...
分类:
其他好文 时间:
2016-11-01 14:26:16
阅读次数:
160
HDFS(Hadoop Distributed File System ) HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统(中文,英文 ...
分类:
其他好文 时间:
2016-10-30 19:43:43
阅读次数:
314
简介 HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统(中文,英文)。 HDFS特点: 1、保存多个副本,且提供容错机制,副本丢失或宕机 ...
分类:
其他好文 时间:
2016-10-25 13:48:53
阅读次数:
400
GlusterFS3.7.16在3.7.15的基础上修复了18个bug,并发现了更多的已知问题,该版本仍有10个已知问题待处理。(fromBLOG)release-notes:https://github.com/gluster/glusterfs/blob/release-3.7/doc/release-notes/3.7.16.md下载地址:https://download.gluster.org/pub/gluster/..
分类:
其他好文 时间:
2016-10-18 23:30:22
阅读次数:
212
分布式系统要做的任务就是把多台机器有机的组合、连接起来,让其协同完成一件任务,可以是计算任务,也可以是存储任务。如果一定要给近些年的分布式系统研究做一个分类的话,大概可以包括三大部分:1.分布式存储系统2.分布式计算系统3.分布式管理系统这是一个范围比较广的话题..
分类:
其他好文 时间:
2016-10-17 00:38:06
阅读次数:
366