Azkaban实战-多job工作流案例

0.数据源：

word.txt:

AAA
BBB
DDD
CCC
AAA
Movle
Kai Movle
BBB yue 

1.创建有依赖关系的多个job描述

(1)第一个job：1.job

vi 1.job

添加内容：

type=command
command=/opt/module/hadoop-2.8.4/bin/hadoop fs -put /opt/module/datas/word.txt /

(2)第二个job：2.job依赖1.job

vi 2.job

添加内容：

type=command
command=/opt/module/hadoop-2.8.4/bin/hadoop jar /opt/module/hadoop-2.8.4/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.8.4.jar wordcount /word.txt /out
dependencies=1

2.注意：将所有job资源文件打到一个zip包中

3.在azkaban的web管理界面创建工程并上传zip包

4.查看结果

思考：

将student.txt文件上传到hdfs，根据所传文件创建外部表，再将表中查询到的结果写入到本地文件