![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
AzKaban
Lv_Hulk
从“0”到“1”!
展开
-
Azaban的基础介绍
Azkaban的基础介绍一、为什么需要工作流调度器1、一个完整的数据分析系统通常都是由大量任务单元组成: shell 脚本程序,java 程序,mapreduce 程序、hive 脚本等2、各任务单元之间存在时间先后及前后依赖关系3、为了很好地组织起这样的复杂执行计划,需要一个工作流调度系统来调度执行例如,我们可能有这样一个需求,某个业务系统每天产生 20G 原始数据,我们每天都要对其进...原创 2019-03-19 10:57:50 · 152 阅读 · 0 评论 -
Azkaban的安装
Azkaban的安装安装过程1、软件介绍Azkaban Web 服务器:azkaban-web-server-2.5.0.tar.gzAzkaban Excutor 执行服务器:azkaban-executor-server-2.5.0.tar.gzAzkaban 初始化脚本文件:azkaban-sql-script-2.5.0.tar.gz2、软件下载下载地址:http://azk...转载 2019-03-19 11:06:18 · 174 阅读 · 0 评论 -
Azkaban的使用
Azkaban的使用界面介绍首页有四个菜单projects:最重要的部分,创建一个工程,所有flows将在工程中运行。scheduling:显示定时任务executing:显示当前运行的任务history:显示历史运行任务介绍projects部分概念介绍创建工程:创建之前我们先了解下之间的关系,一个工程包含一个或多个flows,一个flow包含多个job。job是你想在az...原创 2019-03-19 11:16:50 · 264 阅读 · 0 评论