Azkaban
Dream__people
不必仰望别人,因自己也是一道风景。
展开
-
Azkaban的基础介绍
一、为什么需要工作流调度器1、一个完整的数据分析系统通常都是由大量任务单元组成: shell 脚本程序,java 程序,mapreduce 程序、hive 脚本等2、各任务单元之间存在时间先后及前后依赖关系3、为了很好地组织起这样的复杂执行计划,需要一个工作流调度系统来调度执行例如,我们可能有这样一个需求,某个业务系统每天产生 20G 原始数据,我们每天都要对其进行处理,...原创 2019-12-30 10:48:12 · 106 阅读 · 0 评论 -
Azkaban的安装
安装过程1、软件介绍Azkaban Web 服务器:azkaban-web-server-2.5.0.tar.gzAzkaban Excutor 执行服务器:azkaban-executor-server-2.5.0.tar.gzAzkaban 初始化脚本文件:azkaban-sql-script-2.5.0.tar.gz2、软件下载下载地址:http://az...原创 2019-12-30 10:45:33 · 95 阅读 · 0 评论