Oozie-应用及案例

1、案例一:Oozie 调度 shell 脚本

目标:使用 Oozie 调度 Shell 脚本,分步实现:

1) 解压官方案例模板

2) 创建工作目录

3) 拷贝任务模板到 oozie-apps/目录

4) 随意编写一个脚本 p1.sh

5) 修改 job.properties 和 workflow.xml 文件

job.properties

workflow.xml

6) 上传任务配置

7) 执行任务

8) 杀死某个任务

 

2、案例二:Oozie 调度 MapReduce 任务

目标:使用 Oozie 调度 MapReduce 任务,分步执行:

1) 找到一个可以运行的 mapreduce 任务的 jar 包(可以用官方的,也可以是自己写的)

2) 拷贝官方模板到 oozie-apps

3) 测试一下 wordcount 在 yarn 中的运行

4) 配置 map-reduce 任务的 job.properties 以及 workflow.xml

job.properties

workflow.xml

5) 拷贝待执行的 jar 包到 map-reduce 的 lib 目录下

6) 上传配置好的 app 文件夹到 HDFS

7) 执行任务

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值