客户端调试方法可以添加-olog-level=DEBUG参数，查看详细调试信息。用法示例：mount-tglusterfs-olog-level=DEBUG192.168.1.120:/tank/mnt服务器端调试方法可以更改日志级别：diagnostics.brick-log-level#brick进程日志级别，默认为INFOdiagnostics.client-log-level#客户端日..
分类：
其他好文 时间：
2016-05-17 19:49:16
阅读次数：
414
Google Cloud 设计原理： 1.分布式文件系统： Google Distributed File System(GSF) 为了满足Google迅速增长的数据处理需求，我们设计并实现了Google文件系统(Google File System – GFS)。GFS与传统的分布式文件系统有着很 ...
分类：
其他好文 时间：
2016-05-17 00:36:58
阅读次数：
603
Linux文件系统:ext2,ext3,ext4,xfs,btrfs,reiserfs,jfs,swapswap:交换分区光盘：iso9660Windows：fat32,ntfsUnix:FFS,UFS,JFS2网络文件系统：NFS,CIFS集群文件系统：GFS2,OCFS2分布式文件系统：ceph,moosefs,mogilefs,GlusterFS,Lustre根据其是否支持"journal"功能：日志型文件..
分类：
系统相关 时间：
2016-05-16 17:56:32
阅读次数：
359
Ceph是加州大学Santa Cruz分校的Sage Weil（DreamHost的联合创始人）专为博士论文设计的新一代自由软件分布式文件系统。自2007年毕业之后，Sage开始全职投入到Ceph开 发之中，使其能适用于生产环境。Ceph的主要目标是设计成基于POSIX的没有单点故障的分布式文件系统，使数据能容错和无缝的复制。2010年3
月，Linus Torvalds将Ceph clien...
分类：
其他好文 时间：
2016-05-13 19:11:58
阅读次数：
718
NFS周边 Network File System 作用 像访问本地文件一样去访问NFS服务器上的文件，目录 引用场景： ..1 用户上传的静态文件 图片，视频，用户上传的视频，头像 ..2 中小企业使用NFS的频路很高，如果高并发的大型网站可能使用分布式文件系统 ..3 有多个web服务器提供同一 ...
分类：
其他好文 时间：
2016-05-13 08:02:05
阅读次数：
137
ＤＴ大数据梦工厂联系方式：新浪微博：www.weibo.com/ilovepains/微信公众号：DT_Spark博客：http://.blog.sina.com.cn/ilovepains一：sparkSQL 下的Parquet意义再思考存储空间包括：内存和磁盘，计算方面如果说HDFS是大数据时代分布式文件系统存储的事实标准的话，parquet则是整个大数据时代文件存储格式的事实标准。1、 速度...
分类：
数据库 时间：
2016-05-13 02:00:33
阅读次数：
275
HDFS是一种分布式文件系统，它采用的是master/slave架构对海量文件进行管理。一个HDFS集群是由一个NameNode和一定数目的DataNode组成的，NameNode是一个中心服务器，它负责管理集群中的执行调度，而DataNode则是具体任务的执行节点。HDFS以block为基本单位来处理文件，每个DataNode上都存储一个block，block默认大小为64MB，开发者也可以根据需...
分类：
其他好文 时间：
2016-05-12 18:17:22
阅读次数：
120
Hadoop的体系结构 Hadoop不仅是一个用于分布式存储的分布式文件系统，而是设计用来在由通用计算设备组成的大型集群上执行分布式应用的框架。 HDFS和MapReduce是Hadoop中的两个最基础、最重要的成员，它们提供了互补性服务或在核心层上提供了更高层的服务。 Pig Chukwa Hiv... ...
分类：
其他好文 时间：
2016-05-11 11:16:39
阅读次数：
123
Hadoop组成 包括两个核心组成：HDFS：分布式文件系统，存储海量的数据MapReduce：并行处理框架，实现任务分解和调度 搭建大型数据仓库，PB级数据的存储、处理、分析、统计等业务（搜索引擎、日志分析、商业智能、数据挖掘） 安装Java JDK 1,进入Sshell，检测是否安装java2， ...
分类：
其他好文 时间：
2016-05-11 01:19:03
阅读次数：
142
分布式系统介绍及MogileFS安装、基本配置分布式MogileFS大纲前言:什么是分布式?分布式存在的意义?分布式的难点及CAP、BASE、2PC、X/OpenXA介绍分布式存储和分布式文件系统:MogileFS实现原理:MogileFS编译安装和配置总结前言:不知不觉中我们就进入大数据时代,什么是大数据?什么..
分类：
其他好文 时间：
2016-05-05 07:14:56
阅读次数：
282
