我的系统是 RHEL5 , 可能环境不一样, 需要安装的第三方依赖不一样啊, 反正大家在安装的过程中缺少什么就去安装什么, 一般都会有提示的。 下载 glusterfs-3.2.0.tar.gz 源码包。 随便解压到一个目录。 glusterfs 需要 fuse 的支持, 在安装开始之前请先安装 f ...
分类:
其他好文 时间:
2016-07-25 07:02:16
阅读次数:
184
要使用分布式文件系统来降低成本,于是搜寻了开源的分布式文件系统。 经过安装部署和测试,把我使用中碰到的一些问题总结一下, 希望对大家有所帮助, 我也有一些问题没有搞懂,希望和大家一起交流,共同进步。 第一:CEPH 网上搜索了一些资料, 说 ceph 性能最高,C++编写的代码,支持Fuse,并且没 ...
分类:
其他好文 时间:
2016-07-25 07:00:49
阅读次数:
130
FUSE 是个好东西, 可以用在特殊的领域里面来实现自己的虚拟文件系统。 FUSE的下载与安装 : 从fuse官网下载最新安装包:http://sourceforge.net/projects/fuse/files/fuse-2.X/ 安装很简单: ./configure make make ins ...
分类:
其他好文 时间:
2016-07-25 07:00:05
阅读次数:
155
进实验室后的若干工作总结: 1.阅读GlusterFS客户端代码鸡部分服务器端代码,实现流程刚刚入门。 2.用极low的方法实现了自定义规则下文件定位的容错。 3.思考力GlusterFS自定义规则下文件定位,添加流水线机制的实现,但是还未有较好的方法。 总结就是对GlusterFS系统架构包括源码 ...
分类:
其他好文 时间:
2016-07-24 19:16:58
阅读次数:
180
Linux文件系统管理:Linux文件系统:ext2,ext3,ext4,xfs,btrfs,reiserfs,jfs,swapswap:交换分区光盘:iso9660Windows:fat32,ntfsUnix:FFS,UFS,JFS2网络文件系统:NFS,CIFS集群文件系统:GFS2,OCFS2分布式文件系统:ceph,moosefs,mogilefs,GlusterFS,Lustre根据其是否支持"journ..
分类:
系统相关 时间:
2016-07-23 21:30:08
阅读次数:
362
常常会有这种需求,把HDFS的目录MOUNT到本地目录,然后方便使用LINUX下面的命令直接操作. FUSE也可以达到同样的效果,但是配置比较复杂,新的HADOOP版本都建议使用NFS3来完成这个需求. 要点记录, 1. CORE-SITE.XML 修改 <property> <name>hadoo ...
分类:
其他好文 时间:
2016-07-22 08:49:32
阅读次数:
159
一、简介MooseFS(MooseFileSystem,mfs)是一种分布式文件系统,它将数据分布在网络中的不同服务器上,支持FUSE(用户空间文件系统FilesysteminUserspace,简称FUSE),客户端挂载后可以作为一个普通的Unix文件系统使用MooseFS。MooseFS中共有四种角色:主控服务器masterserver、..
分类:
其他好文 时间:
2016-07-21 20:09:58
阅读次数:
280
一、简介 MooseFS(Moose File System,mfs)是一种分布式文件系统,它将数据分布在网络中的不同服务器上,支持FUSE(用户空间文件系统Filesystem in Userspace,简称FUSE),客户端挂载后可以作为一个 普通的Unix 文件系统使用MooseFS。 Moo ...
分类:
其他好文 时间:
2016-07-19 13:27:16
阅读次数:
175
前言:将多个linux网络端口绑定为1个,可以提升网络性能。公司做了glusterfs网络文件系统,读写都在一块网卡上,导致I/O很低,最后决定做链路聚合来提升服务器的网络吞吐(I/O)可以使用linuxteaming或bond模块。目前发布的各个linux版本内核均已包含了该模块,大多数情况下不..
分类:
系统相关 时间:
2016-07-17 02:44:24
阅读次数:
1337
环境介绍:系统版本:Rhel6.5内核版本:3.18.3-1.el6.elrepo.x86_64Yum源:http://download.gluster.org/pub/gluster/glusterfs/3.6/3.6.9/RHEL/glusterfs-epel.repo节点数量:3个,主机名分别为controller1、controller2、compute01每个节点上有3个磁盘,都分别挂载到/data/bri..
分类:
其他好文 时间:
2016-07-14 22:16:53
阅读次数:
402