使用maven在linux上对hadoop2.2进行编译0、环境介绍:Hadoop信息:Version:2.2下载地址:http://mirrors.cnnic.cn/apache/hadoop/common/hadoop-2.2.0/源码包:hadoop-2.2.0-src.tar.gz软件包:hadoop-2.2.0.tar.gzOs环境:[root@carefree~]#lsb_release-aLSBVersion::base-4...
分类:
系统相关 时间:
2014-09-24 18:22:57
阅读次数:
328
前序:因在widow下用Eclipse联调hadoop2.2.0运行程序没有成功,网上暂时解决办法不多,就折中了下,连接hadoop1.0.3伪分布式
一。用到的环境和工具
1.Eclipse采用的是indio版本,这个可以用官网下载
2.Eclipse hadoop插件:hadoop-eclipse-plugin-1.0.3.jar,
下载地址:http://download.c...
问题描述:在启动datanode进程时,能成功的启动;但用jps查看进程时,发现进程不存在,下面是在datanode日记文件的错误信息如下图的截屏所示:主要原因:发生错误的原因:由于把data放在的tmp的零时目录下,导致格式化之后,datanode中的数据在namenode中无法找相应的句柄。解决...
分类:
其他好文 时间:
2014-09-21 21:59:31
阅读次数:
256
1.hbase安装cd/root/softtarzxvfhbase-0.98.5-hadoop2-bin.tar.gzmvhbase-0.98.5-hadoop2/usr/local/hadoop/hbase2.添加环境变量(所有节点都增加)#vim/etc/profileexportHBASE_HOME=/usr/local/hadoop/hbaseexportPATH=$PATH:/usr/local/hadoop/hbase/bin#source/etc/profile3...
分类:
数据库 时间:
2014-09-18 09:52:54
阅读次数:
265
hadoop1 升级到hadoop2 借用别人的步骤,在时间中做了细化说明,希望对升级的玩家起到一定的辅助作用...
分类:
其他好文 时间:
2014-09-17 13:43:12
阅读次数:
169
我现在是把hadoop-2.5.1的路径是/opt/lib64/hadoop-2.5.1下面,然后将hadoop-2.2.0的路径是/home/hadoop/下载/hadoop-2.2.0,我的eclipse的路径是/opt/programming/atd-bundle/eclipse。因为老师需要...
分类:
系统相关 时间:
2014-09-15 22:42:19
阅读次数:
426
首先感谢作者lxdhdgss,他的博文直接帮助了我如何安装hadoop,下面是他的博文修改版,用于安装在fedora20上面的,jdk1.8版本。到hadoop官网去copy一下链接地址(hadoop2.5.1的地址http://mirrors.cnnic.cn/apache/hadoop/comm...
分类:
其他好文 时间:
2014-09-15 22:31:29
阅读次数:
284
引言
之前成功在服务器上为Mahout0.9打patch,使其支持Hadoop2.2.0。
今天的需求是:在Win7+Eclipse+Maven环境下开发Mahout程序,打jar包放到集群上,使其在Hadoop2.2.0下正常运行。
过程
步骤一:Eclipse下创建Maven工程
pom.xml:
1.引入mahout依赖
depe...
最新的hadoop2.5 安装目录做了一定修改,安装变得稍微简单一点
首先安装准备工具
$ sudo apt-get install ssh
$ sudo apt-get install rsync
配置ssh
$ ssh localhostIf you cannot ssh to localhost without a passphrase, execute the...
分类:
其他好文 时间:
2014-09-10 19:34:21
阅读次数:
201