一、定时执行
需求:JobA每间隔1分钟执行一次;
具体步骤:
1)Azkaban可以定时执行工作流。在执行工作流时候,选择左下角Schedule
2)右上角注意时区是上海,然后在左面填写具体执行事件,填写的方法和crontab配置定时任务规则一致。
3)观察结果
4)删除定时调度
点击remove Schedule即可删除当前任务的调度规则。
二、邮件报警案例
2.1 注册邮箱
1)申请注册一个126邮箱
2)点击邮箱账号=》账号管理
3)开启SMTP服务
4)一定要记住授权码
2.2 默认邮件报警案例
Azkaban默认支持通过邮件对失败的任务进行报警,配置方法如下:
1)在azkaban-web节点hadoop102上,编辑/opt/module/azkaban/azkaban-web/conf/azkaban.properties,修改如下内容:
[hadoop@hadoop102 azkaban-web]$ vim /opt/module/azkaban/azkaban-web/conf/azkaban.properties
添加如下内容:
#这里设置邮件发送服务器,需要 申请邮箱,切开通stmp服务,以下只是例子
mail.sender=hadoop@126.com
mail.host=smtp.126.com
mail.user=hadoop@126.com
mail.password=用邮箱的授权码
#这里设置工作流成功或者失败默认向哪里发送服务
#3.0版本之后的azkaban配置无效
job.failure.email=atguigu@126.com
job.success.email=atguigu@126.com
2)保存并重启web-server。
[hadoop@hadoop102 azkaban-web]$ bin/shutdown-web.sh
[hadoop@hadoop102 azkaban-web]$ bin/start-web.sh
3)编辑basic.flow,加入如下属性:
config:
failure.emails: hadoop@126.com
success.emails: hadoop@126.com
nodes:
- name: jobA
type: command
config:
command: mkdir /etc/A
4)将azkaban.project和basic.flow压缩成email.zip
5)创建工程=》上传文件=》执行作业=》查看结果
没有配置文件指定邮箱时,也可以在这里手动指定。
6)观察邮箱,发现执行成功或者失败的邮件