Hadoop2.2.0启动异常 – Incompatible clusterIDs2014年08月29日? 综合? 共 2399字 ? 字号小中大?评论关闭今天启动Hadoop2.2.0集群后,发现datanode进程没启动,查看日志发现如下报错:2014-05-15 14:46:50,788 FA...
分类:
其他好文 时间:
2015-09-18 18:27:31
阅读次数:
302
1.准备Linux环境 1.0点击VMware快捷方式,右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段:192.168.244.131. 子网掩码:255.255.255.0 -> apply -> ok 回到....
分类:
其他好文 时间:
2015-09-18 12:01:53
阅读次数:
223
今天调试spring-data-hive时,发现新版的hive-service.jar(1.2.1)已经没有HiveClient .而spring-data-hadoop2.2.0.RELEASE中仍在调用这个类!为什么会出现这样的问题呢? 还有一个疑问,类似这样的问题,在hive官...
分类:
Web程序 时间:
2015-09-17 17:51:33
阅读次数:
299
一、准备插件 1、自己编译 1.1 安装Ant官网下载Ant,apache-ant-1.9.6-bin.zip配置环境变量,新建ANT_HOME,值是E:\apache-ant-1.9.6;PATH后面追加";%ANT_HOME%\bin"测试,ant -version 1.2 下...
从小白在安装hadoop困难和错误时遇到说起,同时,我们也希望能得到上帝的指示。首先hadoop更新速度非常快,最新的是hadoop2.5.1,因此就介绍下在安装2.5.1时遇到的各种困难。假设直接准备在系统上安装binary版本号的,能够參考http://www.cnblogs.com/kingl...
0、查看状态 bin/hdfs dfsadmin -report 1、创建文件目录 bin/hdfs dfs -mkdir /in/input2 2、删除目录 bin/hdfs dfs -rmr /in/input2 删除input2目录及目录下的文件,相当于linux的...
分类:
其他好文 时间:
2015-09-17 10:04:28
阅读次数:
184
1.安装Hadoop(1)准备Linux环境(2)安装JDK(3)配置Hadoop2.准备Linux环境(1)我们用户可能都是使用Windows环境,一般用户都是先安装虚拟机,然后在虚拟机上安装Linux系统,这个这里不推荐。(2)这里我们使用租用云主机方法,比如阿里云、UnitedStack等等。...
分类:
其他好文 时间:
2015-09-16 17:32:30
阅读次数:
127
Hadoop2.2.0-HA高可用集群环境搭建 集群主机信息 主机名称 主机ip 配置 主要功能 master1 硬盘300G,内存32G,CPU8核 管理主节点 master2 硬盘300G,内存32G,CPU8核 管理备份节点 slave1 硬盘300G,内存8G,CPU4核 ...
分类:
其他好文 时间:
2015-09-15 13:12:04
阅读次数:
576
hadoop伪分布安装 Hadoop2的伪分布安装步骤【使用root用户用户登陆】other进去超级用户拥有最高的权限 1.1(桥接模式)设置静态IP ,,修改配置文件,虚拟机IP192.168.1.99重启网卡,网关192.168.1.1是物理机下面的默认网关, 执行命令 vi /etc/sysc...
分类:
其他好文 时间:
2015-09-12 13:35:16
阅读次数:
179
使用安装包:scala-2.10.3.tgzspark-0.9.0-incubating-bin-hadoop2.tgzhadoop-2.3.0-cdh5.0.0.tar.gzjdk1.7.0_45下载地址:http://mirror.bit.edu.cn/apache/spark/spark-0.9.0-incubating/spark-0.9.0-incubating-bin-hadoop2.tgzhttp://archive.cloudera.com/cdh5/cdh/5/下载..
分类:
其他好文 时间:
2015-09-08 16:51:20
阅读次数:
250