公开课：1 小时玩转 Kubernetes 调度器-孟凡杰-2022-5-12

最新推荐文章于 2024-10-17 14:32:07 发布

一念一生～one

最新推荐文章于 2024-10-17 14:32:07 发布

阅读量321

点赞数

分类专栏： k8s 文章标签： kubernetes 调度器

本文链接：https://blog.csdn.net/weixin_39246554/article/details/124779159

版权

k8s 专栏收录该内容

118 篇文章 31 订阅

订阅专栏

本节内容

调度概览

调度器分类

1.单体调度器：对于大规模批量调度诉求场景，不能胜任！(基于pod的事件调度)！
2.两层调度器：应用平台–hadoop,spark；资源调度器(负责底层计算资源的管理)，应用调度器；resource offers，存在的问题：1.资源争抢如何解决？2.分配资源不合理如何处理解决办法：悲观锁先锁定资源，再进行资源的腾挪处理。–>效率不高
3.状态共享调度器：基于版本控制/事务控制的基于乐观锁的调度！ full state,本地缓存，回写，冲突判断，重试。

调度器需要充分考虑诸多的因素

资源高效利用：装箱率要高！
afinity：微服务，分步式系统，网络调用，本机调用，排除了网络调用，额外的传输时间，物理网卡带宽限制！
anti-affinity：某个业务的不同副本，不能让其跑在一台机器上，一个机架上，一个地域里，使其分布在不同的故障域。
locality：数据本地化，是一个很重要的概念，哪里有数据，我的作业就去哪里，这样可以减少数据拷贝的开销。k8s里的拉取镜像。

kube-scheduler

生产者-消费者模型，plugin，

调度核心阶段

调度阶段：
1.predicate(预选)：
2.priority/score(优选)：
绑定阶段：

调度插件

LeastAllocated：空闲资源多的分高 --使的node上的负载比较合理一点！
MostAllocated：空闲资源少的分高 – 可以退回Node资源！

Predicates plugin工作原理

链式过滤器，

Kubernetes中的资源分配

1.limits：在Cgroups里使用；cpu.cfs_quota/cpu.cfs_period(10w)=1
2.requests：cpu这个requests其实在Cgroup里也起作用。当你多个应用发生资源抢占时，他们抢占的cpu时间比较是多少呢？是通过cpu.share去调节的。k8s是如何实现的呢？这里如果设置的是一个cpu，request是1的话，那么cpu.share是1024。如果你设置的是100m，相当于是0.1个cpu，那么cpu.share就是0.1*1024=102. 也就是cpu.requests也是最终会体现到Cgroups里面去的。