TEZ安装试用

标签：

下载地址：http://apache.dataguru.cn/tez/0.7.0/
第一次使用maven编译 tez的时候到tez ui部分报错，google后发现有人遇到类似问题是因为maven版本的问题，
当时我使用的是最新的maven3.3，我尝试换到maven3.2.5，再编译后成功。
其他步骤参考：http://www.myexception.cn/open-source/1927193.html
hdfs dfs -mkdir /apps/
hdfs dfs -copyFromLocal /app/tezsrc/tez-dist/target/tez-0.7.0.tar.gz /apps/

我写了一个脚本用于在结点之间复制文件与文件夹
vi dist.sh

#this shell used to distribute file to slaves
filepath=$1
target=$2
for node in $(cat $HADOOP_HOME/etc/hadoop/slaves);
do
        echo "copy $filepath to $node:$target now ......"
        if [ ! -d $filepath ]; then
                scp  $filepath hadoop@$node:$target
        else
                scp -r $filepath hadoop@$node:$target
        fi
done;

使用方法：
sh dist.sh source target

可以在hive中配置使用tez。

TEZ安装试用

标签：

原文地址：http://www.cnblogs.com/huaxiaoyao/p/4658243.html