码迷,mamicode.com
首页 >  
搜索关键字:glusterfs 分布式文件系统    ( 1569个结果
Google GFS文件系统深入分析
Google GFS文件系统深入分析现在云计算渐成潮流,对大规模数据应用、可伸缩、高容错的分布式文件系统的需求日渐增长。Google根据自身的经验打造的这套针对大量廉价客户机的Google GFS文件系统已经广泛的在Google内部进行部署,对于有类似需求的企业而言有相当的参考价值。AD:51CTO...
分类:其他好文   时间:2015-06-21 22:26:22    阅读次数:585
lagstash + elasticsearch + kibana 3 + kafka 日志管理系统部署 02
因公司数据安全和分析的需要,故调研了一下 GlusterFS + lagstash + elasticsearch + kibana 3 + redis 整合在一起的日志管理应用:安装,配置过程,使用情况等续一,glusterfs分布式文件系统部署: 说明: 公司想做网站业务日志及系统日志统一收集....
分类:其他好文   时间:2015-06-19 23:02:42    阅读次数:356
单机安装Hadoop环境
目的 这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会,比如在HDFS上运行示例程序或简单作业等。 先决条件 支持平台 GNU/Linux是产品开发和运行的平台。 Hadoop已在有2000个节点的GNU/L...
分类:其他好文   时间:2015-06-19 21:33:11    阅读次数:133
FastDFS架构剖析(非常值得一看的架构分析和解读)
FastDFS是一款类GoogleFS的开源分布式文件系统,它用纯C语言实现,支持Linux、FreeBSD、AIX等UNIX系统。它只 能通过专有API对文件进行存取访问,不支持POSIX接口方式,不能mount使用。准确地讲,GoogleFS以及FastDFS、 mogileFS、HDFS、TF...
分类:其他好文   时间:2015-06-18 18:38:48    阅读次数:167
hadoop学习笔记:hadoop文件系统浅析
1.什么是分布式文件系统?管理网络中跨多台计算机存储的文件系统称为分布式文件系统。2.为什么需要分布式文件系统了?原因很简单,当数据集的大小超过一台独立物理计算机的存储能力时候,就有必要对它进行分区(partition)并存储到若干台单独计算机上。3.分布式系统比传统的文件的系统更加复杂因为分布式文...
分类:其他好文   时间:2015-06-15 21:57:14    阅读次数:114
centos6.5下搭建fastdfs分布式存储
←使用iftop监控linux网络流量分布式文件系统FastDFS原理介绍→centos6.5下搭建fastdfs分布式存储2014-04-24VenusFastDFSGo to commentfastDFS下载地址:http://code.google.com/p/fastdfs/download...
分类:其他好文   时间:2015-06-13 12:33:36    阅读次数:343
利用共享文件夹实现故障转移群集的仲裁盘
利用共享文件夹实现故障转移群集的仲裁盘前面的博文中我们已经为大家介绍了如何来搭建一个分布式文件系统(DFS),并且为大家介绍了如何对DFS进行高可用的配置,那么今天的博文我们就在此基础上为大家来讲解如何利用DFS来做我们WindowsCluster的仲裁盘。不知道大家是否了解我在..
分类:其他好文   时间:2015-06-12 15:20:49    阅读次数:677
部署高可用的分布式文件系统(DFS)
部署高可用的分布式文件系统(DFS)前面的博文中文大家介绍了如何来搭建一个分布式文件系统,以及分布式文件系统的优点,今天我们将要在博文中为大家介绍如何来实现分布式文件系统的高可用部署。大家都知道,微软的服务只有实现了高可用(容错)以后用起来才是最安心的,那么下..
分类:其他好文   时间:2015-06-11 11:14:52    阅读次数:248
FastDFS5.03安装配置
FastDFS介绍fastdfs是一个开源的,高性能的的分布式文件系统,他主要的功能包括:文件存储,同步和访问,设计基于高可用和负载均衡,fastfd非常适用于基于文件服务的站点,例如图片分享和视频分享网站。fastfds有两个角色:跟踪服务(tracker)和存储服务(storage),跟踪服务控制..
分类:其他好文   时间:2015-06-11 00:32:27    阅读次数:200
Apache Hadoop 和Hadoop生态圈
Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。Hadoop的框架最核心的设计就是:HDFS和MapRedu...
分类:Web程序   时间:2015-06-10 19:32:12    阅读次数:130
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!