压缩包是直接weget 后面加官网上的tar包地址获取的 [root@xuegod43 ~]# tar -zxvf /home/hadoop/hadoop-2.6.5-src.tar.gz gzip: stdin: not in gzip formattar: Child returned stat ...
分类:
其他好文 时间:
2017-07-13 23:36:36
阅读次数:
169
我的Hadoop版本是hadoop-2.7.3, 我们可以去hadoop官网下载源码hadoop-2.7.3-src,以及编译好的工程文件hadoop-2.7.3, 后者可以直接部署. 前者hadoop-2.7.3-src必须mvn之后才能部署. 我们修改代码必须是在hadoop-2.7.3-src ...
分类:
其他好文 时间:
2017-06-22 20:54:35
阅读次数:
264
如要转载,请注上作者和出处。 须知: 我们下载的是hadoop-2.7.3-src 源码。 这个版本默认调度器是Capacity调度器。 在2.0.2-alpha版本的时候,有人汇报了一个fifo调度器的bug,社区把默认调度器从原来的fifo切换成capacity了。 在Hadoop中,调度器是一 ...
分类:
其他好文 时间:
2017-06-07 10:03:02
阅读次数:
751
pwd显示当前文件夹,ls查看文件夹下的文件,cd 进入文件夹-bash-4.2$ pwd/home/myhaspl-bash-4.2$ lsabc hadoop-2.4.1 mydoclist mypylst mypylsts numpyabd hadoop-2.4.1-src.tar.gz my ...
分类:
系统相关 时间:
2017-05-02 09:58:48
阅读次数:
235
准备工作: 1. hadoop集群(我用的是hadoop-2.7.3版本),这里hadoop有两种:1是编译好的hadoop-2.7.3;2是源代码hadoop-2.7.3-src; 2. 自己的机器可以是任何系统,只要支持JVM,自己的主机上必须有eclipse,以及hadoop-2.7.3和ha ...
分类:
编程语言 时间:
2017-04-28 13:49:17
阅读次数:
900
折腾了大半个晚上最终部署成功了,比在Linux上面略微复杂一点,具体过程例如以下: 1) jdk、ant、hadoop环境变量配置 2) 分别将hadoop-2.5.2.tar.gz、hadoop-2.5.2-src.tar.gz、hadoop2x-eclipse-plugin、hadoop-com ...
一、解压hadoop src包到workspace目录 二、File->Import->Existing Maven Projects,在Root Directory处选择解压好的目录,Finish 三、等待maven把依赖包下载好后,会出现一些问题,下面是重头戏。 四、maven问题解决 (1)若 ...
分类:
系统相关 时间:
2016-09-30 12:29:02
阅读次数:
178
安装时报错:Failed to execute goal org.apache.maven.plugins:maven-antrun-plugin:1.7:run (site) on project hadoop-hdfs: An Ant BuildException has occured: in ...
分类:
数据库 时间:
2016-09-27 14:42:19
阅读次数:
245
4.1、环境: 1)Linux 64 位操作系统,CentOS 6.4 版本,VMWare 搭建的虚拟机 2)虚拟机可以联网 4.2、官方编译说明: 解压命令:tar -zxvf hadoop-2.4.0-src.tar.gz 之后进入到解压文件夹下,可以查看BUILDING.txt文件, more
分类:
其他好文 时间:
2016-02-17 17:31:00
阅读次数:
192
1. 下载Hadoop 2.2.0 源码包,并解压 $ wget http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.2.0/hadoop-2.2.0-src.tar.gz $ tar zxf hadoop-2.2.0-src.tar.g
分类:
其他好文 时间:
2016-01-30 17:39:36
阅读次数:
214