1、开发配置环境: 具体的就不介绍了,请参考我另外一篇文章http://my.oschina.net/lanzp/blog/309078 2、Hadoop节点配置 在讲解之前,先声明一点,这篇文章的所有环境都是基于上一篇伪分布的配置文章的基础上再做...
分类:
其他好文 时间:
2014-11-22 09:24:19
阅读次数:
265
最近要在hadoop2.4上面上线hdfs raid,但是之前hdfs raid是作为svn 的branch开发的,领导希望通过patch的方式将hdfs raid功能打进trunk里面去,这里涉及到svn branch和trunk的合并问题,以下是hdfs raid 打patch的具体过程。...
分类:
其他好文 时间:
2014-11-20 11:58:52
阅读次数:
237
package com.my.mapreduce.wordcount;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org....
分类:
其他好文 时间:
2014-11-19 21:44:52
阅读次数:
123
Ubuntu下使用Eclipse和hadoop进行MapReduce程序的开发...
分类:
系统相关 时间:
2014-11-19 11:09:33
阅读次数:
197
Ubuntu下使用Eclipse和hadoop进行MapReduce程序的开发...
分类:
系统相关 时间:
2014-11-19 00:57:19
阅读次数:
195
直接上问题:这两天为了试验,安装了两套集群:(1)32位hadoop1集群(5个节点);(2)64位hadoop2集群(6个节点)两个集群中都遇到过这样的问题:在namenode正常启动hadoop集群后,查看datanode是正常的显示存在进程,但是在web界面中查看的时候,发现数据节点全部属于宕机,或者就是干脆直接..
分类:
Web程序 时间:
2014-11-17 19:47:36
阅读次数:
248
直接上问题:这两天为了试验,安装了两套集群:
(1)32位hadoop1集群(5个节点);
(2)64位hadoop2集群(6个节点)
两个集群中都遇到过这样的问题:在namenode正常启动hadoop集群后,查看datanode是正常的显示存在进程,但是在web界面中查看的时候,发现数据节点全部属于宕机,或者就是干脆直接没有datanode.还有种情况,...
分类:
Web程序 时间:
2014-11-17 16:00:22
阅读次数:
199
1、解压[root@cluster3 conf]# tar -zxvf hbase-0.98.7-hadoop2-bin.tar.gz 2、环境变量[root@cluster3 conf]# vi hbase-env.shexport JAVA_HOME=/usr/java/jdk1.7.0_17H...
分类:
其他好文 时间:
2014-11-17 11:59:48
阅读次数:
235
Ubuntu 下使用hadoop2.4搭建伪分布式集群...
分类:
系统相关 时间:
2014-11-15 18:54:35
阅读次数:
285