环境:
hadoop2.2.0
hive0.13.1
Ubuntu 14.04 LTS
java version "1.7.0_60"
Oracle10g
到以下地址下载安装包
http://mirrors.cnnic.cn/apache/hive/stable/apache-hive-0.13.1-bin.tar.gz...
分类:
数据库 时间:
2014-08-20 19:43:12
阅读次数:
363
1. 安装JDK
a. 解压jdk
[bigdata001@Yuxi software]$ tar -xvzf jdk-7u60-linux-x64.tar.gz
b. 设置环境变量
PATH=$PATH:$HOME/bin
export JAVA_HOME=/home/bigdata001/BigDataPlatform/jdk1.7.0_60
export JAVA...
分类:
其他好文 时间:
2014-08-19 20:53:05
阅读次数:
324
11、配置hadoop分布式环境! 三台机器都需要这么配置1)、将/opt/modules/hadoop-2.2.0-src重命名 mv /opt/modules/hadoop-2.2.0-src/ /opt/modules/hadoop-2.2.0-src_x32_back2)、解压64位源码ta...
分类:
其他好文 时间:
2014-08-18 09:12:03
阅读次数:
275
我的测试环境是三台机器分别是Hadoop-Yarn.Hark.Com 192.168.1.200Hadoop-Slave1.Hark.Com 192.168.1.201Hadoop.Slave2.Hark.Com 192.168.1.202我为了自己能充分练习hadoop 64位源码编译,所以三台机...
分类:
其他好文 时间:
2014-08-17 15:29:52
阅读次数:
236
Hostname
IP
Hadoop版本
Hadoop
功能
系统
hadoop2
192.168.119.131
2.2.0
namenode
jdk1.6+hadoop
centos5.9
h2slave1
192.168.119...
分类:
其他好文 时间:
2014-08-17 14:21:32
阅读次数:
257
1 安装环境1.1 客户端1.2 服务端1.3 安装准备 2 操作系统安装2.1.1 BIOS打开虚拟化支持2.1.2 关闭防火墙2.1.3 安装VNC3 JAVA安装 3.1 配置目的3.2 配置过程3.3 结果验证4 主机名配置4.1 配置目的4.2 配置过程4.3 结果验证5 增加hadoop...
分类:
其他好文 时间:
2014-08-17 06:02:33
阅读次数:
969
在虚拟机利用两台centos(64位),由于使用的机器是64位,所以要自己编译好安装包1、建Hadoop运行组和用户root下运行命令,创建组和用户groupadd hadoopuseradd -g hadoop hadooppasswd hadoop2、修改/etc/hosts192.168.13...
分类:
其他好文 时间:
2014-08-16 12:21:20
阅读次数:
263
本文所用环境为3台hadoop2.2,hbase已经安装完毕,具体安装可参照前两篇文章。hive适用的元数据库为mysql,所以master上要安装mysql,用系统自带的即可,这里不在详述。(1)安装hive解压#tarzvxfhive-0.12.0.tar.gz-C/usr
#cd/usr
#mvhive-0.12.0hive2.替换jar包,保持hbase0.96..
分类:
其他好文 时间:
2014-08-16 09:49:41
阅读次数:
303
一、概述Hadoop的版本更新挺快的,已经到了2.4,但是其周边工具的更新速度还是比较慢的,一些旧的周边工具版本对hadoop2.x的兼容性做得还不完善,特别是sqoop。最近,在为hadoop2.2.0找适合的sqoop版本时遇到了很多问题。尝试了多个sqoop1.4.x版本的直接简单粗暴的报版本不兼容..
分类:
其他好文 时间:
2014-08-15 18:06:49
阅读次数:
548
1、在Ubuntu下创建hadoop用户组和用户2、在Ubuntu下安装JDK(可以在官网下载linux包然后解压安装)3、hadoop下载:http://www.apache.org/dyn/closer.cgi/hadoop/common/因为64位ubuntu需要编译源文件:故下载hadoop...
分类:
其他好文 时间:
2014-08-15 17:29:09
阅读次数:
241