
Azkaban
qq_43193797
github:https://github.com/yanjie666
展开
-
利用azkaban编写shell脚本实现hive多个时间分区的数据修复功能
模拟代码如下: 方式一: #!/bin/bash etldate=(20190404) etlhour=(13) for date in ${etldate[@]} do for hour in ${etlhour[@]} do echo $date$hour ./ad_nobid_data_b.sh $date$hour done done 方式二: etldate=(201910...原创 2019-10-30 15:27:54 · 592 阅读 · 0 评论 -
Azkaban 概述
1.1 什么是 Azkaban Azkaban 是和 Oozie 类似的用于进行任务调度的工具, 但是使用起来要比 Oozie 容易的多. Azkaban 是由 Linkedin 公司推出的一个批量工作流任务调度器,主要用于在一个工作流内以一个特定的顺序运行一组工作和流程,它的配置是通过简单的key:value对的方式,通过配置中的dependencies来设置依赖关系。 Azkaba...原创 2019-05-29 22:06:15 · 526 阅读 · 1 评论