YARN——容量调度中决定用户资源的几个参数

《YARN——正确理解容量调度的capacity参数》一文中提到了,决定用户资源使用上限的还有user-limit-factor,minimum-user-limit-percent等参数,本文就来聊聊这些相关的参数

  • user-limit-factor

从字面上理解为用户限制因子,其含义是单个用户可使用队列资源的倍数,即单个用户使用的资源上限为capacity配置的值乘以该系数。

例如该参数默认配置为1.0,队列capacity配置为10,那么单个用户最大也就使用10%的集群资源;如果该参数配置为2.0,队列capacity仍旧配置为10,那么单个用户最大可使用20%的资源(这里先不考虑用户权重参数)。

该参数除了作用于单个用户资源使用限制外,还作用于单个用户的AM资源使用上限,单个用户可提交任务数上限,具体计算方式也是乘以对应的基数。

例如该参数配置为0.8,队列maximum-application配置为1000时,单个用户最大能提交的用户数为800,如下图所示:

  • 4
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值