前面介绍过hadoop的简单安装和FA安装，在这里将介绍几种hadoop2中HA（高可用性）安装，HA技术使hadoop不再存在单点namenode的故障。先来第一种：nfs+zookeeperHadoop
版本:2.2.0OS 版本: Centos6.4Jdk 版本: jdk1.6.0_32环境配...
分类：
其他好文 时间：
2014-05-17 03:07:21
阅读次数：
388
提示：该实验平台是在RedHatb6下进行的
配置成功的前提有三个：
（1）：在window下能ping的通linux
（2）：关闭linux 防火墙 执行指令：/etc/init.d/iptables stop
（3）：使SElinux处于宽容模式 执行指令：setenforce permissive
一、配置tftp服务器步骤
（1）：挂载磁盘，安装tptp-serv...
分类：
系统相关 时间：
2014-05-13 16:24:59
阅读次数：
409
kickstart自动化linux系统安装一、系统环境redhate6.3IP:10.240.240.210,Gateway:10.240.240.1二、使用yum方式安装软件包yuminstall-ytftp*xinetd"*dhcp*"nfs-utils-*三、配置dhcp服务器配置DHCP服务器的配置文件[root@localhosttftpboot]#vi/etc/dhcpd.conf#DHCPServerConfigu..
分类：
其他好文 时间：
2014-05-13 12:18:53
阅读次数：
375
一、简介1、介绍MogileFS是一个开源的分布式文件系统，用于组建分布式文件集群，由LiveJournal旗下DangaInteractive公司开发，Danga团队开发了包括Memcached、MogileFS、Perlbal等不错的开源项目：(注：Perlbal是一个强大的Perl写的反向代理服务器)2、MogileFS的特性（1）工作..
分类：
其他好文 时间：
2014-05-13 03:31:00
阅读次数：
538
NFS与PRCNFS就是（NetworkFileSystem的缩写，最初是由sum这家公司所发展起来的。它最大的功能就是可能通过网络，让不同的机器、不同的操作系统可以共享彼此的文件。NFS是通过网络来传输数据的，那么NFS使用哪个端口来进行数据传输呢？基本上NFS这个服务器的端口开在2049，但是..
分类：
其他好文 时间：
2014-05-13 03:29:06
阅读次数：
294
一、分布式文件系统1.简介分布式文件系统（DistributedFileSystem）是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连。分布式文件系统的设计基于客户机/服务器模式。一个典型的网络可能包括多个供多用户访问的服务器。另外，对等特性..
分类：
其他好文 时间：
2014-05-13 01:52:38
阅读次数：
501
一、简介1、分布式文件系统分布式文件系统（DistributedFileSystem）是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连，也就是集群文件系统，可以支持大数量的节点以及PB级的数量存储。相对地，在一个分享的磁盘文件系统中，所有节点..
分类：
其他好文 时间：
2014-05-13 01:09:26
阅读次数：
478
MogileFS是一套高效的文件自动备份组件，由SixApart开发，广泛应用在包括LiveJournal等web2.0站点上。MogileFS由3个部分组成：第1个部分：是server端，包括mogilefsd和mogstored两个程序。前者即是mogilefsd的tracker，它将一些全局信息保存在数据库里，例如站点domain,class,h..
分类：
其他好文 时间：
2014-05-11 19:38:37
阅读次数：
571
接续接上篇缓存时代来临为蓝本,继续改造我们的百万级站点架构,这次我们拿之前存储静态内容的nfs开刀,众所周知nfs的多台集群节点下可能由于多重原因(磁盘io,网络带宽,并发场景),不适合做文件共享系统的基础结构.互联网站点中,存在大量图片或其他静态内容,并且这些内容一般在1M之..
分类：
其他好文 时间：
2014-05-11 19:16:07
阅读次数：
674
