GlusterFS概述 GlusterFS系统是一个可扩展的网络文件系统,相比其他分布式文件系统,GlusterFS具有高扩展性、高可用性、高性能、可横向扩展等特点,并且其没有元数据服务器的设计,让整个服务没有单点故障的隐患。 文件存储通常支持POSIX接口(如glusterfs,但GFS、HDFS ...
                            
                            
                                分类:
其他好文   时间:
2019-12-17 10:30:36   
                                阅读次数:
122
                             
                    
                        
                            
                            
                                    简介 Glusterfs是一个开源的分布式文件系统,是Scale存储的核心,能够处理千数量级的客户端。是整合了许多存储块(server)通过Infiniband RDMA或者 Tcp/Ip方式互联的一个并行的网络文件系统。 特征: 容量可以按比例的扩展,且性能却不会因此而降低。 廉价且使用简单,完全 ...
                            
                            
                                分类:
其他好文   时间:
2019-12-16 19:38:54   
                                阅读次数:
89
                             
                    
                        
                            
                            
                                    NFS,全名叫Network File System,中文叫网络文件系统,是Linux、UNIX系统的分布式文件系统的一个组成部分,可实现在不同网络上共享远程文件系统。 NFS由Sun公司开发,目前已经成为文件服务的一种标准之一(RFC1904,RFC1813)。 其最大的功能就是可以通过网络,让不 ...
                            
                            
                                分类:
其他好文   时间:
2019-12-09 21:08:41   
                                阅读次数:
125
                             
                    
                        
                            
                            
                                    Fastdfs分布式文件系统-互为主从配置部署 1.安装基础依赖 yum install -y gcc gcc-c++ pcre pcre-devel zlib zlib-devel openssl openssl-devel unzip 2.下载安装 libfastcommon wget http ...
                            
                            
                                分类:
系统相关   时间:
2019-12-05 12:50:00   
                                阅读次数:
113
                             
                    
                        
                            
                            
                                1、概述 hdfs文件系统主要设计为了存储大文件的文件系统;如果有个TB级别的文件,我们该怎么存储呢?分布式文件系统未出现的时候,一个文件只能存储在个服务器上,可想而知,单个服务器根本就存储不了这么大的文件;退而求其次,就算一个服务器可以存储这么大的文件,你如果想打开这个文件,效率会高吗 hdfs的 ...
                            
                            
                                分类:
其他好文   时间:
2019-12-05 01:35:40   
                                阅读次数:
140
                             
                    
                        
                            
                            
                                5.分布式文件服务器FastDFS(阿里巴巴) 5.1什么是FastDFS FastDFS 是用 c 语言编写的一款开源的分布式文件系统。FastDFS 为互联网量身定制,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,使用 FastDFS很容易搭建一套高性能的文件服务器集 ...
                            
                            
                                分类:
其他好文   时间:
2019-11-29 22:30:16   
                                阅读次数:
122
                             
                    
                        
                            
                            
                                1、Fastdfs介绍Fastdfs是用c语言编写的一个开源的轻量级分布式文件系统,它对文件进程管理,功能包括:文件存储,文件同步,文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题,特别适合以文件为载体的在线服务,如相册网站,视频网站等等Fastdfs为互联网量身定制,充分考虑了冗余备份,负载均衡,线性扩容等,并注重高可用,高性能等指标,使用fastdfs很容易搭建一套高性能的文
                            
                            
                                分类:
其他好文   时间:
2019-11-27 09:22:13   
                                阅读次数:
74
                             
                    
                        
                            
                            
                                    2019-11-24 20:24:56 1.产生密钥对: 可以看到.ssh目录下多了两个文件 2.将每台机器的公钥复制给其他机器。 3.此时再次开启Hadoop就不需要输入4次密码了 将文件放到HDFS分布式文件系统中 ...
                            
                            
                                分类:
其他好文   时间:
2019-11-24 23:55:29   
                                阅读次数:
170
                             
                    
                        
                            
                            
                                    https://blog.csdn.net/qq_33009107/article/details/90641940 #Tracker 端口号 22122 启动tracker /etc/init.d/fdfs_trackerd start 查看 netstat -unltp|grep fdfs 关闭... ...
                            
                            
                                分类:
其他好文   时间:
2019-11-23 18:12:38   
                                阅读次数:
54
                             
                    
                        
                            
                            
                                1.windows配置环境变量hadoop,winutils.exe和hadoop.dll下载链接:https://share.weiyun.com/5eebZFr 2.demo: (1)pom.xml: <?xml version="1.0" encoding="UTF-8"?> <project ...
                            
                            
                                分类:
其他好文   时间:
2019-11-23 16:12:36   
                                阅读次数:
76