1.概述cinder作为openstack的快存储服务,为instance提供永久的volume服务,cinder作为一种可插拔式的服务,能够支持各种存储类型,包括专业的FC存储,如EMC,NetApp,HP,IBM,huawei等商场的专业存储服务器,存储厂商只要开发对应的驱动和cinder对接即可;此外,cinder还支持..
分类:
其他好文 时间:
2016-01-22 22:18:36
阅读次数:
785
一、FastDFS简介FastDFS是一款开源的、分布式文件系统(Distributed File System),由淘宝开发平台部资深架构师余庆开发。作为一个分布式文件系统,它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题,特别适合中小文件(建议范围:4KB < file_size <500MB),对以文件为载体的在线服务,如相册网...
分类:
其他好文 时间:
2016-01-22 11:01:14
阅读次数:
165
启动结果:Redirecting to /bin/systemctl status glusterd.serviceglusterd.service - GlusterFS, a clustered file-system server Loaded: loaded (/usr/lib/system...
分类:
其他好文 时间:
2016-01-18 17:23:18
阅读次数:
837
HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是依据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统(中文。英文)。HDFS有非常多特点:①保存多个副本,且提供容错机制,副本丢失或宕机自己...
分类:
其他好文 时间:
2016-01-16 19:24:59
阅读次数:
201
基础:linux常用命令、Java编程基础大数据:科学数据、金融数据、物联网数据、交通数据、社交网络数据、零售数据等等。Hadoop: 一个开源的分布式存储、分布式计算平台.(基于Apache)Hadoop的组成: HDFS:分布式文件系统,存储海量的数据。 MapReduce:并行处理框架...
分类:
其他好文 时间:
2016-01-15 12:55:14
阅读次数:
141
Hadoop7天课程 课程体系 Day01>>>>>>>>>>>>>>>>>>>> hadoop项目简介 hadoop简介 hadoop前景 apache的开源项目 解决问题:(核心) 海量数据的存储(HDFS) ---Hadoop分布式文件系统,解决机器怎么存储 海量数据的分析(MapReduce...
分类:
其他好文 时间:
2016-01-13 15:52:16
阅读次数:
258
文件系统选型NFSMFS(分布式文件系统)GFS(云计算存大文件)ext234xfs(c7rh7默认)选型:c5:ext3c6:ext4视频下载、流媒体、数据库、小文件以下需要单独安装:xfs数据库mysql等reiserfs大量小文件0,中小型网站1,重视维护方便2,大并发优化,缓存解决磁盘压力:cdn网站缓存..
分类:
其他好文 时间:
2016-01-11 06:58:01
阅读次数:
200
转自:http://www.cnblogs.com/liuling/p/2013-6-17-01.html相关源代码:http://www.cnblogs.com/ggjucheng/archive/2013/02/19/2917020.htmlHDFS是一个分布式文件系统,既然是文件系统,就可以对...
分类:
编程语言 时间:
2016-01-06 00:03:53
阅读次数:
192
GlusterFS主要应用在集群系统中,具有很好的可扩展性。软件的结构设计良好,易于扩展和配置,通过各个模块的灵活搭配以得到针对性的解决方案。可解决以下问题:网络存储,联合存储(融合多个节点上的存储空间),冗余备份,大文件的负载均衡(分块)。由于缺乏一些关键特性,可靠性..
分类:
其他好文 时间:
2016-01-05 19:07:47
阅读次数:
240
Hadoop 是一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有着高容错性的特点,...
分类:
Web程序 时间:
2016-01-05 18:46:28
阅读次数:
160