码迷,mamicode.com
首页 > 其他好文 > 详细

HUE中Oozie执行Hive脚本

时间:2019-03-17 20:11:55      阅读:1225      评论:0      收藏:0      [点我收藏+]

标签:end   user   orm   mic   api   启动   image   xxx   company   

Oozie执行hive,传入参数
1. 新建一个workflow

技术图片

 

2. 拖入一个hive2

技术图片

 

3. hive脚本如下

CREATE TABLE IF NOT EXISTS spider_tmp.org_invest_fund_${date} (
`id` int, 
`info_id` int, 
`company` string, 
`company_url` string, 
`legal_person` string, 
`reg_capital` string, 
`establish_date` string, 
`investor` string, 
`update_time` string)
ROW FORMAT DELIMITED
FIELDS TERMINATED BY `
STORED AS TEXTFILE;

注意,此处${date}表示需要执行时传入的参数
4. 添加参数

技术图片

5. 启动,填入参数即可

技术图片

 

6.workflow.xml如下

<workflow-app name="Workflow_hive" xmlns="uri:oozie:workflow:0.5">
    <start to=" hive-table_load_data "/>
    <kill name="Kill">
        <message>Action failed, error message[${wf:errorMessage(wf:lastErrorNode())}]</message>
    </kill> 
    <action name="hive-table_load_data" cred="hive2">
        <hive2 xmlns="uri:oozie:hive2-action:0.1">
            <job-tracker>${jobTracker}</job-tracker>
            <name-node>${nameNode}</name-node>
            <jdbc-url>jdbc:hive2://hadoop1:10000/spider_tmp</jdbc-url>
            <script>/user/fengz/xxxx.q</script>
            <param>date=${date}</param>
        </hive2>
        <ok to="End"/>
        <error to="Kill"/>
    </action>
    <end name="End"/>
</workflow-app>

  

 

HUE中Oozie执行Hive脚本

标签:end   user   orm   mic   api   启动   image   xxx   company   

原文地址:https://www.cnblogs.com/EnzoDin/p/10548429.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!