Azkaban实战-Hive脚本任务

最新推荐文章于 2024-10-02 07:00:00 发布

原创

最新推荐文章于 2024-10-02 07:00:00 发布 · 2.2k 阅读

收录于

本文详细介绍如何使用Azkaban进行Hive脚本的批量任务调度，包括创建job描述文件和Hive脚本，打包资源文件，上传至Azkaban平台，启动job并查看结果的全过程。

1.创建job描述文件和hive脚本

(1)Hive脚本：student.sql

vim student.sql

添加内容：

use default;
drop table student;
create table student(id int, name string)
row format delimited fields terminated by '\t';
load data local inpath '/opt/module/datas/student.txt' into table student;
insert overwrite local directory '/opt/module/datas/student'
row format delimited fields terminated by '\t'