azkaban
失散Lost
这个作者很懒,什么都没留下…
展开
-
azkaban的概览
1、调度系统背景 一个完整的大数据分析系统通常都是由大量任务单元组成:shell脚本程序,mapreduce程序、 hive脚本、spark程序等。 各任务单元之间存在时间先后及前后依赖关系:先后关系、依赖关系、定时执行。 为了很好地组织起这样的复杂执行计划,需要一个工作流调度系统来调度执行。 2、常见调度系统 简单的任务调度:直接使用linux的crontab来定义、shell和python脚本...原创 2019-09-24 19:10:25 · 147 阅读 · 0 评论 -
azkaban 3.57.0 编译+soloserver的安装和简单使用
编译 1、下载源码包 官网地址为:https://github.com/azkaban/azkaban/archive/3.57.0.tar.gz 2、将源码包上传服务器并解压源码包 [root@hadoop01 home]# tar -zxvf /home/azkaban-3.57.0.tar.gz -C /home/ 3、执行编译 编译参考官网地址:https://azkaban.readth...原创 2019-09-24 20:12:01 · 517 阅读 · 0 评论