工作流调度器azkaban(以及各种工作流调度器比对)
1:工作流调度系统的作用:(1):一个完整的数据分析系统通常都是由大量任务单元组成:比如,shell脚本程序,java程序,mapreduce程序、hive脚本等;(2):各任务单元之间存在时间先后及前后依赖关系;(3):为了很好地组织起这样的复杂执行计划,需要一个工作流调度系统来调度执行;(4):举例说明工作流调度系统的具体作用: 我们可能有这样一个需求,某个业务系统每
原创
2017-12-15 14:51:43 ·
2997 阅读 ·
0 评论