1.什么是Hbase HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBase是Google Bigtable的开源实现,类似Google Bigtable利用GFS ...
分类:
其他好文 时间:
2017-07-24 17:33:24
阅读次数:
166
Linux文件查找,详细的介绍了locate和find命令的使用 ...
分类:
系统相关 时间:
2017-07-23 10:00:12
阅读次数:
290
分布式文件系统比较出名的有HDFS 和 GFS,其中HDFS比较简单一点。本文是一篇描述非常简洁易懂的漫画形式讲解HDFS的原理。比一般PPT要通俗易懂很多。不难得的学习资料。1、三个部分: 客户端、nameserver(可理解为主控和文件索引,类似Linux的inode)、datanode(存放实... ...
分类:
其他好文 时间:
2017-07-08 14:10:11
阅读次数:
155
Google文件系统 GFS是一个可扩展的分布式文件系统,用于大型的、分布式的、对大量数据进行访问的应用。它运行于廉价的普通硬件上,但可以提供容错功能。它可以给大量的用户提供总体性能较高的服务。 1、设计概览 (1)设计想定 GFS与过去的分布式文件系统有很多相同的目标,但GFS的设计受到了当前及预 ...
分类:
其他好文 时间:
2017-07-05 13:28:18
阅读次数:
112
from:http://elf8848.iteye.com/blog/1724382 常见的分布式文件系统有,GFS、HDFS、Lustre 、Ceph 、GridFS 、mogileFS、TFS、FastDFS等。各自适用于不同的领域。它们都不是系统级的分布式文件系统,而是应用级的分布式文件存储服 ...
分类:
其他好文 时间:
2017-07-02 13:02:29
阅读次数:
194
Hadoop历史 Hadoop历史 雏形开始于2002年的Apache的Nutch,Nutch是一个开源Java 实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。 随后在2003年Google发表了一篇技术学术论文谷歌文件系统(GFS)。GFS也就是googl ...
分类:
其他好文 时间:
2017-06-28 21:49:07
阅读次数:
103
/** * 产生随机字符串 * * @param int $length 输出长度 * @param string $chars 可选的 ,默认为 0123456789 * @return string 字符串 */ function random($length, $chars = '012345... ...
分类:
Web程序 时间:
2017-06-17 19:30:39
阅读次数:
173
一、整体架构图 二、框架的瓶颈 上述框架的瓶颈在存储NFS,现在较多的使用的是GFS分布式存储 ...
分类:
Web程序 时间:
2017-06-17 10:15:52
阅读次数:
228