码迷,mamicode.com
首页 >  
搜索关键字:gfs2 gfs    ( 379个结果
分布式存储系统 知识体系
最近看完了杨传辉老师写的《大规模分布式存储系统》一书,发现里面很多知识点和之前看的《大型网站系统与Java中间件》有很多相通之处,也渐渐加 深了我对分布式技术的兴趣。但无奈分布式涵盖范围太广了,分布式存储、分布式计算、CAP理论、Paxos算法、什么GFS、Hadoop、 Dynamo、BigTab ...
分类:其他好文   时间:2016-04-30 12:50:59    阅读次数:298
GFS中元数据的管理
GFS 元数据(metadata)中包含三部分: GFS元数据的管理方式: 1.文件的命名空间和块的命名空间: 采用持久化的方式. 对于文件和块的命名空间以及从文件到块的映射:通过向操作日志登记修改而保持不变,操作日志存储在master的本地磁盘并在几个远程机器上留有副本,使用日志使得我们可以简单地 ...
分类:其他好文   时间:2016-04-13 20:43:56    阅读次数:250
Google的Bigtable学习笔记(不保证正确性)
跪求各路大侠指正:1、首先是一个列式存储的简单数据模型的数据库,它比键值对模型/文档模型NoSQL数据库复杂点(也就更强一点)。2、它的分布式存储性能依靠于GFS也就对单机房网络有硬性指标。3、它同时提供了相对均衡的顺序读写操作,也就更适用于这样的应用。4、保证SSTable不便,结构简化了读写冲突
分类:其他好文   时间:2016-02-16 06:28:08    阅读次数:221
KVM虚拟化笔记(十四)------kvm虚拟机动态迁移
相比kvm虚拟机静态迁移中需要拷贝虚拟机虚拟磁盘文件,kvm虚拟机动态迁移无需拷贝虚拟磁盘文件,但是需要迁移到的虚拟主机之间需要有相同的目录结构虚拟机磁盘文件,本文这部分内容通过nfs来实现,当然也可以采用GFS2集群文件系统来实现,本文以共享存储进行动态迁移KVM动态迁..
分类:其他好文   时间:2016-02-06 22:27:52    阅读次数:446
Hadoop平台简述
Hadoop 是 Apache 下一个开源的分布式的软件计算框架,它是由Doug Cutting根据 Google提出的分布式文件系统 GFS 和 MapReduce 编程模型而实现的。Hadoop 由许多部分组成,其核心是用于数据存储的分布式文件系统HDFS与用于分布式计算的 MapReduce....
分类:其他好文   时间:2016-01-26 21:48:01    阅读次数:303
HDSF主要节点解说(二)工作原理
HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是依据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统(中文。英文)。HDFS有非常多特点:①保存多个副本,且提供容错机制,副本丢失或宕机自己...
分类:其他好文   时间:2016-01-16 19:24:59    阅读次数:201
Linux iSCSI协议实现共享存储
大纲一、存储设备类型二、什么是SCSI和iSCSI三、iSCSI安装与配置一、存储设备类型DAS:DirectAttachedStorage直连主机的总线上的设备NAS:networkAttachedStorage文件共享服务器,共享级别fileSAN:StorageAreaNetwork把SCSI协议借助于其他网络协议实现传送tcp/ipiscsiFC(光纤..
分类:系统相关   时间:2016-01-12 19:56:48    阅读次数:330
NFS零零总总
文件系统选型NFSMFS(分布式文件系统)GFS(云计算存大文件)ext234xfs(c7rh7默认)选型:c5:ext3c6:ext4视频下载、流媒体、数据库、小文件以下需要单独安装:xfs数据库mysql等reiserfs大量小文件0,中小型网站1,重视维护方便2,大并发优化,缓存解决磁盘压力:cdn网站缓存..
分类:其他好文   时间:2016-01-11 06:58:01    阅读次数:200
CentOS5.8 cman+rgmanager+iscsi+gfs2+cLVM 实现集群共享存储
大纲一、系统环境二、准备工作三、配置过程一、系统环境系统环境CentOS5.8x86_64node1.network.comnode1172.16.1.101node2.network.comnode2172.16.1.105node3.network.comnode3172.16.1.110软件版本cman-2.0.115-124.el5.x86_64.rpmrgmanager-2.0.52-54.el5.centos.x86_64.rpm..
分类:其他好文   时间:2016-01-11 01:41:06    阅读次数:480
apache开源项目--HBase
HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase是Google Bigtable的开源实现,类似Google Bigtable利用GFS作为其文件存储系统,HB...
分类:Web程序   时间:2016-01-05 18:40:20    阅读次数:192
379条   上一页 1 ... 25 26 27 28 29 ... 38 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!