如果集群资源不足,Oozie 任务启动后占用大量资源可能导致任务失败一般有两种情况。
一是导致自身任务挂起无法执行成功;二是导致其他任务无法启动。
解决办法
在 workflow.xml 的配置 <configuration> 中增加如下属性 <property> :
<property>
<name>oozie.launcher.mapreduce.map.memory.mb</name>
<value>512</value>
</property>
<property>
<name>oozie.launcher.yarn.app.mapreduce.am.resource.mb</name>
<value>512</value>
</property>
限制任务启动后使用的资源即可。