Azkaban
文章平均质量分 79
调度
a姜哲雨
小贾历练日志
展开
-
Azkaban的基本使用方法
Azkaban的基本使用方法一、 支持任务类型二、 单一job案例三、 多任务工作流程配置四、 执行spark程序报错Installation Failed. Error chunking一、 支持任务类型Azkaban内置的任务类型支持command、javacommand实际是执行shell脚本,所以支持性很高。二、 单一job案例需求:编写时间脚本,每隔一分钟将时间输入到指定文本date.txt编写job# 必须以job为结尾vi p1.jobtype=commandco原创 2021-02-02 18:04:25 · 1121 阅读 · 1 评论 -
Azkaban基本架构与安装部署
azkaban基本架构与安装部署一、基本架构二、Azkaban安装部署三、启动四、窗口介绍一、基本架构azkabanWebServer:是整个Azkaban工作流系统的主要管理者,用户登录认证、负责project管理、定时执行工作流、跟踪工作流执行进度第一系列任务。 azkabanExecutorServer:负责具体的工作流的提交、执行,他们通过mysql数据库来协调任务的执行。 关系型数据库(MySQL):存储大部分执行流状态,AzkabanW原创 2021-02-02 10:43:24 · 236 阅读 · 0 评论