Azkaban 实战演示

本文详细介绍了Azkaban的启动流程,包括启动Azkaban Web服务器和executor。接着展示了如何创建并执行单一job和多job工作流,操作HDFS任务,MapReduce任务以及Hive脚本任务。最后,讲解了如何为任务设置调度时间并查看执行结果。
摘要由CSDN通过智能技术生成

启动Azkaban

使开始的程序在后台运行

  • 启动Azkaban Web 服务器
[ww@master azkaban-web-2.5.0]$ pwd
/home/ww/azkaban-2.5.0/azkaban-web-2.5.0
[ww@master azkaban-web-2.5.0]$ bin/azkaban-web-start.sh
  • 启动 Azkaban executor 执行服务器
[ww@master azkaban-executor-2.5.0]$ pwd
/home/ww/azkaban-2.5.0/azkaban-executor-2.5.0
[ww@master azkaban-executor-2.5.0]$ bin/azkaban-executor-start.sh

1 Command 类型

1.1 单一 job 示例

1 创建 job 描述文件

[ww@master ~]$mkdir azkaban
[ww@master ~]$ cd azkaban
[ww@master azkaban]$ vim command.job

输入以下内容:

#command.job
type=command
command=echo 'hello'

2 将 job 资源文件打成 zip 包

[ww@master zip]$ zip command.zip command.job 
  adding: command.job 
  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值