码迷,mamicode.com
首页 >  
搜索关键字:hadoop_src    ( 51个结果
加压压缩文件报错gzip: stdin: not in gzip format tar: Child returned status 1 tar: Error is not recoverable: exiting now
压缩包是直接weget 后面加官网上的tar包地址获取的 [root@xuegod43 ~]# tar -zxvf /home/hadoop/hadoop-2.6.5-src.tar.gz gzip: stdin: not in gzip formattar: Child returned stat ...
分类:其他好文   时间:2017-07-13 23:36:36    阅读次数:169
Hadoop 修改源码以及将修改后的源码应用到部署好的Hadoop中
我的Hadoop版本是hadoop-2.7.3, 我们可以去hadoop官网下载源码hadoop-2.7.3-src,以及编译好的工程文件hadoop-2.7.3, 后者可以直接部署. 前者hadoop-2.7.3-src必须mvn之后才能部署. 我们修改代码必须是在hadoop-2.7.3-src ...
分类:其他好文   时间:2017-06-22 20:54:35    阅读次数:264
Hadoop 三大调度器分析
如要转载,请注上作者和出处。 须知: 我们下载的是hadoop-2.7.3-src 源码。 这个版本默认调度器是Capacity调度器。 在2.0.2-alpha版本的时候,有人汇报了一个fifo调度器的bug,社区把默认调度器从原来的fifo切换成capacity了。 在Hadoop中,调度器是一 ...
分类:其他好文   时间:2017-06-07 10:03:02    阅读次数:751
数学之路-分布式计算-linux/unix技术基础(4)
pwd显示当前文件夹,ls查看文件夹下的文件,cd 进入文件夹-bash-4.2$ pwd/home/myhaspl-bash-4.2$ lsabc hadoop-2.4.1 mydoclist mypylst mypylsts numpyabd hadoop-2.4.1-src.tar.gz my ...
分类:系统相关   时间:2017-05-02 09:58:48    阅读次数:235
编写hadoop程序并打成jar包上传到hadoop集群运行
准备工作: 1. hadoop集群(我用的是hadoop-2.7.3版本),这里hadoop有两种:1是编译好的hadoop-2.7.3;2是源代码hadoop-2.7.3-src; 2. 自己的机器可以是任何系统,只要支持JVM,自己的主机上必须有eclipse,以及hadoop-2.7.3和ha ...
分类:编程语言   时间:2017-04-28 13:49:17    阅读次数:900
hadoop学习笔记(三)——WIN7+eclipse+hadoop2.5.2部署
折腾了大半个晚上最终部署成功了,比在Linux上面略微复杂一点,具体过程例如以下: 1) jdk、ant、hadoop环境变量配置 2) 分别将hadoop-2.5.2.tar.gz、hadoop-2.5.2-src.tar.gz、hadoop2x-eclipse-plugin、hadoop-com ...
分类:Windows程序   时间:2017-04-17 11:01:34    阅读次数:328
Eclipse Hadoop源码阅读环境
一、解压hadoop src包到workspace目录 二、File->Import->Existing Maven Projects,在Root Directory处选择解压好的目录,Finish 三、等待maven把依赖包下载好后,会出现一些问题,下面是重头戏。 四、maven问题解决 (1)若 ...
分类:系统相关   时间:2016-09-30 12:29:02    阅读次数:178
hadoop安装时报错 /usr/local/hadoop-2.6.0-stable/hadoop-2.6.0-src/hadoop-hdfs-project/hadoop-hdfs/target/findbugsXml.xml does not exist
安装时报错:Failed to execute goal org.apache.maven.plugins:maven-antrun-plugin:1.7:run (site) on project hadoop-hdfs: An Ant BuildException has occured: in ...
分类:数据库   时间:2016-09-27 14:42:19    阅读次数:245
centos6.4编译hadoop2.4源码
4.1、环境: 1)Linux 64 位操作系统,CentOS 6.4 版本,VMWare 搭建的虚拟机 2)虚拟机可以联网 4.2、官方编译说明: 解压命令:tar -zxvf hadoop-2.4.0-src.tar.gz 之后进入到解压文件夹下,可以查看BUILDING.txt文件, more
分类:其他好文   时间:2016-02-17 17:31:00    阅读次数:192
64位CentOS上编译 Hadoop 2.2.0
1. 下载Hadoop 2.2.0 源码包,并解压 $ wget http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.2.0/hadoop-2.2.0-src.tar.gz $ tar zxf hadoop-2.2.0-src.tar.g
分类:其他好文   时间:2016-01-30 17:39:36    阅读次数:214
51条   上一页 1 2 3 4 ... 6 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!