尝试了简单的安装hadoop2后，我们再来尝试一下hdfs的一项新功能：FN。这项技术可以解决namenode容量不足的问题。它采用多个namenode来共享datanode的方式，每个namenode属于不同的namespace。下面是我们的安装信息Hadoop
版本:2.2.0OS 版本: Ce...
分类：
其他好文 时间：
2014-05-17 10:54:41
阅读次数：
518
前面介绍过hadoop的简单安装和FA安装，在这里将介绍几种hadoop2中HA（高可用性）安装，HA技术使hadoop不再存在单点namenode的故障。先来第一种：nfs+zookeeperHadoop
版本:2.2.0OS 版本: Centos6.4Jdk 版本: jdk1.6.0_32环境配...
分类：
其他好文 时间：
2014-05-17 03:07:21
阅读次数：
388
前面介绍过使用NFS+zookeeper来解决namenode单点失败问题，因为NFS可能也会存在单点问题，所以hadoop提供了一种叫做JournalNode技术，这项技术可以在JournalNode节点间共享数据我们来介绍这一种技术：JournalNode+
zookeeperHadoop 版本...
分类：
其他好文 时间：
2014-05-17 00:29:07
阅读次数：
331
目前hadoop1的稳定版本是1.2.1，我们以版本1.2.1为例详细的介绍hadoop1的安装，此过程包括OS安装与配置，JDK的安装，用户和组的配置，这些过程在hadoop2也有可能用到。Hadoop
版本:1.2.1OS 版本: Centos6.4Jdk 版本: jdk1.6.0_32环境配置...
分类：
其他好文 时间：
2014-05-16 22:21:50
阅读次数：
435
hadoop dfsadmin -safemode leave
分类：
其他好文 时间：
2014-05-16 22:18:40
阅读次数：
325
[转载]大数据人才流失： 科研为何陷入困境已有 5 次阅读2014-5-13
12:27|系统分类:观点评述推荐到群组无论无处不在的“大数据”概念引起怎样的联想，逐步增长的数据规模确是改变着我们和世界的交互方式。这在工业界、政界、媒体、学术界，几乎任何领域，都是事实。逐渐增强的对大数据进行收集、处理...
分类：
其他好文 时间：
2014-05-16 21:34:11
阅读次数：
254
---恢复内容开始---前面花了很多时间来介绍hadoop1的安装，随着hadoop的发展，hadoop2的应用也越来越普及，hadoop2解决了hadoop1中的很多问题，比如单点故障，namenode容量小的问题。我们先来安装最简单的版本Hadoop
版本:2.2.0OS 版本: Centos6...
分类：
其他好文 时间：
2014-05-13 16:45:30
阅读次数：
333
一、DRBD概述DRBD(DistributedReplicatedBlockDevice)是Linux平台上的分散式储存系统。由内核模组、用户空间工具组成，通常用于高可用性（highavailability,HA）集群。其实现方式是通过网络在服务器之间的对块设备（硬盘，分区，逻辑卷等）进行镜像。你可以把它看作是一种网络R..
分类：
其他好文 时间：
2014-05-13 13:02:59
阅读次数：
488
