YARN 早就支持CPU资源的调度了

首先,yarn刚出世的时候,对于CPU的调度只是在计划中,而前段时间一直用的2.0.0的版本,也做过测试,确实对cpu的资源限制不予理睬。

但是,前不久,升级到了2.3.0,没有验证这个功能是否实现,一直认为对于公平调度器的队列配置,vcores的配置无所谓,直到上次把这个值配置成了0,限制了队列的最大资源,结果用户提交的APP只能启动一个ApplicationMaster,无法启动一个Task.

好吧,看这里:

Add multi-resource scheduling to the fair scheduler

2.1.0-beta就提供了cpu的调度。
不过,上面提到的最大资源限制有点意思,格式是 "X mb, Y vcores",内存是绝对不会超过X,但是cpu的使用数却可以超过Y,但只能超过n个(n=ApplicationMaster需要的vcores)。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值