Azkaban
qq_43193797
github:https://github.com/yanjie666
展开
-
利用azkaban编写shell脚本实现hive多个时间分区的数据修复功能
模拟代码如下:方式一:#!/bin/bashetldate=(20190404)etlhour=(13)for date in ${etldate[@]}dofor hour in ${etlhour[@]}doecho $date$hour./ad_nobid_data_b.sh $date$hourdonedone方式二:etldate=(201910...原创 2019-10-30 15:27:54 · 558 阅读 · 0 评论 -
Azkaban 概述
1.1 什么是 AzkabanAzkaban 是和 Oozie 类似的用于进行任务调度的工具, 但是使用起来要比 Oozie 容易的多.Azkaban 是由 Linkedin 公司推出的一个批量工作流任务调度器,主要用于在一个工作流内以一个特定的顺序运行一组工作和流程,它的配置是通过简单的key:value对的方式,通过配置中的dependencies来设置依赖关系。Azkaba...原创 2019-05-29 22:06:15 · 476 阅读 · 1 评论