码迷,mamicode.com
首页 >  
搜索关键字:分布式文件系    ( 1397个结果
浅析FastDFS及所遇问题集锦
一、FastDFS简介 FastDFS(最新版本v3.04)是一个开源的轻量级分布式文件系统,它用纯C语言实现,支持Linux、FreeBSD、AIX等UNIX系统。它只能通过专有API对文件进行存取访问,不支持POSIX接口方式,不能mount使用,...
分类:其他好文   时间:2015-11-04 15:01:46    阅读次数:446
图片上传-下载-删除等图片管理的若干经验总结
图片上传功能很常见,很多人都觉得这个功能很简单,随着要求的提高,这个图片小系统也真是复杂啊。      需求1:   上传,未了达到“大容量存储”、“负载均衡”、“性能好”,“有技术含量”等装逼需求,采用了Fastdfs。      注:FastDFS是一个开源的轻量级分布式文件系统,它对文件进行管理。   功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡...
分类:Web程序   时间:2015-10-26 17:06:40    阅读次数:156
TFS增加dataserver
通过之前的努力,已经搭建好了一套基本的tfs环境,包括一台nameserver和一台dataserver以及独立的nginx-tfs,而在实际应用中的分布式文件系统,只有一台dataserver明显是不行的,因而本文将介绍tfs环境下添加dataserver的操作和配置过程。环境介绍:Tfsname...
分类:Web程序   时间:2015-10-19 15:36:21    阅读次数:255
MogileFS 的介绍(MogileFS 系列1)[分布式文件系统]
MogileFS 是一个开源的分布式文件系统,用于组建分布式文件集群,由 LiveJournal 旗下 Danga Interactive 公司开发,Danga 团队开发了包括 Memcached、MogileFS、Perlbal 等不错的开源项目:(注:Perlbal 是一个强大的 Perl 写的...
分类:其他好文   时间:2015-10-19 10:54:07    阅读次数:156
HDFS分布式文件系统(The Hadoop Distributed File System)
HDFS的设计目标是存储海量数据,并且为上层应用提供高性能访问。本文简述HDFS的架构。
分类:其他好文   时间:2015-10-16 18:56:14    阅读次数:170
hadoop学习笔记:hadoop文件系统浅析
1.什么是分布式文件系统?管理网络中跨多台计算机存储的文件系统称为分布式文件系统。2.为什么需要分布式文件系统了?原因很简单,当数据集的大小超过一台独立物理计算机的存储能力时候,就有必要对它进行分区(partition)并存储到若干台单独计算机上。3.分布式系统比传统的文件的系统更加复杂因为分布式文...
分类:其他好文   时间:2015-10-15 18:34:01    阅读次数:220
2015第42周三
晚上去操场散步,捡到一个iphone,等失主电话后归还,对方自然很感激,个人心情也很愉悦,东西尤其是手机丢而复得自然惊喜,不是自己的东西物归原主也自然很踏实快乐。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特...
分类:其他好文   时间:2015-10-14 23:32:48    阅读次数:215
HDFS简介
Hadoop分布式文件系统HDFSHadoopDistributedFilesystem分布式文件系统:当数据集大到超过一台独立的计算机存储能力时,就需要存储到若干台单独的计算机上,管理网络中跨多台计算机存储的文件系统称为分布式文件系统。分布式文件系统复杂性:需要考虑节点故障、不丢失任何数据。..
分类:其他好文   时间:2015-10-09 18:29:00    阅读次数:153
hadoop-hdfs、mapreduce学习随笔
HDFS:1、分布式文件系统:管理网络中跨多台计算机存储的文件系统2、hadoop定义了一个抽象文件系统概念,具体就是一个java抽象类:org.apache.hadoop.fs.FileSystm,只要某个文件系统实现了该接口,就可以作为hadoop支持的文件系统3、数据块:hdfs中默认存储是6...
分类:其他好文   时间:2015-10-08 14:40:16    阅读次数:188
分布式文件系统之在域命名空间中新建文件夹
1、打开“DFS管理”右击域命名空间,选择“新建文件夹”;2、打开“新建文件夹”对话框,在名称对话框,输入文件夹名称,然后选择“添加”;3、打开“添加文件夹目标”对话框,选择“浏览”;4、选择想要添加的文件夹,选择“确定”;5、返回“添加文件夹目标”对话框,选择“..
分类:其他好文   时间:2015-10-03 19:33:27    阅读次数:244
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!