FusionInsight大数据开发---Oozie应用开发

Oozie应用开发

要求:

  1. 了解Oozie应用开发适用场景
  2. 掌握Oozie应用开发
  3. 熟悉并使用Oozie常用API

Oozie简介

  1. Oozie是一个Hadoop作业的工作流调度管理系统
  2. Oozie工作流(workflow)是放置在控制依赖DAG(有向无环图)中的一组动作(Action)集合,控制依赖可确保后续操作在见面的操作已经成功完成后才会启动。
  3. Oozie的协调作业(Coordinator)是通过时间(频率)和有效数据来触发当前的Oozie工作流。
  4. Oozie支持多种Hadoop作业(包括:HDFS,Map Reduce、Hive、Streaming MP、Loader、Spark、Distcp)以及系统类作业(Java和shell)

Oozie应用场景
Oozie是一个工作流调度引擎,对各种类型的Hadoop作业进行编排与调度。

    1. 编排与管理逻辑复杂的多种类型的Hadoop
    2. 基于时间(频率)触发工作流
    3. 基于数据有效性触发工作流
    4. 实时监控与管理集群的工作流,快速定位问题

转载于:https://www.cnblogs.com/cainiao-chuanqi/p/11259348.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值