Flink yarn.application-attempts 与 yarn.resourcemanager.am.max-attempts 区别

本文介绍了Flink在YARN上运行时,配置`yarn.resourcemanager.am.max-attempts`和`yarn.application-attempts`的区别。`yarn.resourcemanager.am.max-attempts`是YARN集群的全局配置,限制所有应用的最大尝试次数,默认值为2。而`yarn.application-attempts`则针对每个Flink Job,其最大值不能超过全局配置,并在`flink-conf.yaml`中设置。当Flink Job失败时,YARN会根据这些配置决定重试次数。
摘要由CSDN通过智能技术生成

yarn.resourcemanager.am.max-attempts

是yarn集群上的全局配置,对运行在集群上的所有flink任务起作用;

在yarn-site.xml中配置;

 

yarn.application-attempts

只对当前的flink Job起作用,且不能大于yarn.resourcemanager.am.max-attempts,不然会被yarn.resourcemanager.am.max-attempts的值覆盖掉;

在flink-conf.yaml中配置(每个Job有一个 application master,每个application master 有一个 flink-conf.yaml);

集群初始化会占用一次(比如设置为5,则允许失败重启4次)

 

A hadoop job in Yarn is called an application. For example, a mapreduce job is one-to-one mapped to an Yarn application currently. If an application fails for a certa

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

二十六画生的博客

你的鼓励是我创作最大的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值