kubernetes中的调度和资源管理（QoS，优先级，抢占）

最新推荐文章于 2023-05-31 18:40:34 发布
最新推荐文章于 2023-05-31 18:40:34 发布
阅读量630 收藏
点赞数
分类专栏： k8s 文章标签： kubernetes 调度 资源管理 qos 优先级
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_46595591/article/details/107620114
版权
本文详细介绍了Kubernetes的调度过程，包括Yaml文件提交、API Server校验、Pod状态变化、Kube-Scheduler选择节点等步骤。接着讨论了资源管理，涵盖基础调度如资源定义、Pod QoS分类、资源Quota、亲和与反亲和调度，以及高级调度的优先级和抢占机制。通过理解这些概念，能更好地理解Kubernetes如何合理分配和利用资源。
摘要由CSDN通过智能技术生成

之前学习kubernetes时，实际部署操作和理论知识并不能很好的连接起来，尤其是如何调度的过程有些模棱两可，下面是一些总结以及对于k8s资源管理的学习

目录

一、调度过程

用一句话简单来概括就是将Pod放到合适的Node上去
下面用图解来说明

1.开始有一个Yaml文件

在这里插入图片描述

2.提交完Yaml文件后，APIServer将待创建的请求路由给Controllers进行校验

在这里插入图片描述

3.校验完后，创建一个Pod，但此时namespace为空，phase为pending

在这里插入图片描述

4.Kube-Scheduler观察到新创建的Pod namespace为空，视为待调度

在这里插入图片描述

5.通过一系列计算，Kube-Scheduler找出最适合的节点Node1,并更新namespace

在这里插入图片描述

6.在Node1上的Kubelet观察到此Pod将其拉到Node1上进行一系列的资源配置，最后将状态改为running

在这里插入图片描述

7.合适的节点选择

k8s最主要的一个特点就是合理利用资源，那么这就体现在如何找到一个合适的节点，下面是具体描述
1.满足Po

最低0.47元/天 解锁文章
Jasonzz_
关注
专栏目录
Kubernetes之应用部署调度策略测试用例
09-24
综上所述，Kubernetes应用部署调度策略的测试用例设计需要全面覆盖资源管理、亲和性、选择器、优先级、QoS、扩展性、故障恢复、自定义调度和一致性等多个方面。通过详尽的测试，可以确保Kubernetes在复杂环境中能够...
k8s的资源管理及应用优先级（包括QoS、pod优先级）
chen_haoren的博客
09-24 3480
文章目录资源管理资源是什么CPU的含义内存的含义请求和约束带资源请求的 Pod 如何调度和运行kubernetes资源对象请求（requests）上限（limits）默认资源配置（limit range)资源配额（resource quota）应用优先级QoS（服务质量）根据QoS进行资源回收策略QoS pods被kill掉场景与顺序pod优先级（priority）为什么要设置pod优先级 资源管理 资源是什么 在 kubernetes 中，有两个基础但是非常重要的概念： node和pod ： node 翻
K8s中资源优先级（Priority）文档
weixin_43550014的博客
09-27 2247
文章目录一、优先级1、定义2、功能3、使用二、驱逐（Eviction）1.背景2.软驱逐（Soft Eviction）和硬驱逐（Hard Eviction）1、软驱逐2、硬驱逐3、意义3.实现4.依据(QoS与优先级）5.流程总结6.特例 一、优先级 1、定义 Priority：在除去 QoS之外，K8s同时存在着一种可行的自定义方式，即Priority，优先级表明了一个 Pod 相对于其它 Pod 的重要性。 PriorityClass：是一个不受命名空间约束的对象，它定义了优先级类名跟优先级整数值的映射
北京大学高性能计算平台未名教学一号使用入门（仅限北大在校学生使用）
康雨城
03-14 2232
背景 未名教学一号是为方便老师同学学习实践高性能计算建立的高性能计算集群，北京大学师生均可申请并免费使用。 未名教学一号的优势在于免费，可以满足我们平时小规模机器学习深度学习的需求。我们都知道，一般机器学习使用的都是GPU，但是GPU的价格又比较昂贵。在没有资金支持的情况下，也只能使用CPU，未名教学一号提供了CPU的计算资源。 第一步 申请与登陆 直接到北大高性能计算中心，进行账户申...
Kubernetes 配置Pod的服务质量（Qos）以及生产环境资源池规划；
最新发布
qq_44930876的博客
05-31 792
Kubernetes 配置Pod的服务质量（Qos）以及生产环境规划；
Kubernetes学习笔记-计算资源管理（2）pod Qos等级&为命名空间中的pod设置默认的requests和limits20230218
wwxsoft的专栏
02-18 1019
其他所有的pod都属于这个等级，包括容器的requests和limits不相同的单容器pod，至少有一个容器只定义了requests但没有定义limits的pod，以及一个容器的requests和limits相等，但时另一个容器不指定requests和limits的pod。LimitRange对象中配置的校验（和默认值）信息在api服务器接收到新的pod和pvc创建请求时执行，如果之后修改了限制，已经存在的pod和pvc将不会再次进行校验，新的限制只会应用于之后创建的pod和pvc。
5G网络优化QoS管理机制.pptx
05-06
综上所述，5G网络优化的QoS管理机制是一个复杂而精细的过程，它涵盖了从QoS架构、QoS参数定义到QoS流映射和管理的各个方面。理解并掌握这些机制对于构建高效、灵活且能够满足未来通信需求的5G网络至关重要。
论文研究-能够提供QoS保证的固定优先级调度.pdf
09-12
一种新的能够提供（m，k）-firm保证的固定优先级调度算法被提出，该算法能够根据任务的周期以及所要求的QoS参数进行调度优先级的设定，并通过将任务设置为抢占和可选来反映其紧迫程度。文中给出该算法的可调度判定...
【博客593】k8s为pod进行cpu绑核以进一步提高性能
qq_43684922的博客
01-17 3902
在k8s中，对于游戏训练等任务场景下，游戏worker模拟真实玩家时，性能对cpu依赖程度很高，此时如果对pod进行cpu绑核能够一定程度上再提高性能。
k8s之Qos（服务质量）
zenglingmin8的博客
11-04 2838
k8s之Qos（服务质量） 1. Qos简介 QoS的英文全称为"Quality of Service",中文名为"服务质量"。在kubernetes中，每个POD都有个QoS标记，通过这个Qos标记来对POD进行服务质量管理，它确定Pod的调度和驱逐优先级。它取决于用户对服务质量的预期，也就是期望的服务质量。对于POD来说，服务质量体现在两个指标上，一个指标是CPU，另一个指标是内存。在实际运行过程中，当NODE节点上内存资源紧张的时候，kubernetes根据POD具有的不同QoS标记，采取不同的处理策
slurm 使用
weixin_42017042的博客
03-09 2871
简单使用 交互式使用方式：使用 salloc 请求资源，然后可以使用 ssh 连接节点后使用。squeue 用来查看 job salloc -N1 -n1 --exclusive squeue -u `username` --state=running ssh casxxx 详解解释 –exclusive 为独占节点， sbatch 提交作业 方法一： 先写作业脚本 xxx.slurm 然后再使用命令 sbatch xxx.slurm 提交作业 以下为一个作业脚本示例 方法二： srun -N 2
k8s之QoS简介
小人物的博客
09-04 2816
QoS（Quality of Service） 简介 QoS（Quality of Service） 简介QoS（Quality of Service），大部分译为 “服务质量等级”，又译作 “服务质量保证”，是作用在 Pod 上的一个配置，当 Kubernetes 创建一个 Pod 时，它就会给这个 Pod 分配一个 QoS 等级，可以是以下等级之一： Guaranteed：Pod 里的每个容器都必须有内存/CPU 限制和请求，而且值必须相等。如果一个容器只指明limit而未设定request，则r.
关于K8s中资源服务质量管理Resource Qos的一些笔记整理
山河已无恙
12-03 668
分享一些 K8s中资源服务质量管理的笔记博文内容涉及：K8s Qos简单介绍资源配置的特点: 节点的超用，可压缩/不可压缩,完全可靠性等介绍介绍三种Qos服务质量等级定义的 Demo理解不足小伙伴帮忙指正精神的寓所是我们的，不是阴曹地府，不是天上星辰，这两者都是活在我们之中的精神所制作的。----《作为意志和表象的事件》
Slurm安装和常用操作
weixin_43262264的博客
12-31 2896
slurm 安装 源码安装 下载最新的slurm源码包 yum install rpm-build -y #安装rpm-build软件,以提供rpmbuild命令 # 安装时提示缺一堆软件包，如，一一安装就好，centos下都可以解决，在ubuntu下却找不到相同的包，导致无法使用rpm安装,如果安装失败在本地会生成一个rpmbuild目录，别跟变异成功的弄混 sudo rpmbuild -ta slurm*.tar.bz2 sudo rpm --install <the rpm files&gt
k8s原理+调度+Qos+优先级+抢占+资源管理（cgroup树的管理）
weixin_44593531的博客
08-07 1686
一、k8s的架构及工作原理 基本架构 1. Master K8S中的Master是集群控制节点，负责整个集群的管理和控制，其中master节点的基本组件有： apiserver：提供了k8s各类资源对象（pod,RC,Service等）的增删改查及watch等HTTP Rest接口，是整个系统的数据总线和数据中心。 controller-manager：负责对所有资源对象进行控制，通过 apiserver 监控整个集群的状态，并确保集群处于预期的工作状态。 scheduler：负责资源调度的进程，通过AP
浅谈 K8S QoS(服务质量等级)
qq_24794401的博客
12-03 4052
QoS（Quality of Service） 简介 QoS（Quality of Service），大部分译为 “服务质量等级”，又译作 “服务质量保证”，是作用在 Pod 上的一个配置，当 Kubernetes 创建一个 Pod 时，它就会给这个 Pod 分配一个 QoS 等级，可以是以下等级之一： Guaranteed：Pod 里的每个容器都必须有内存/CPU 限制和请求，而且值必须相等。...
智能电视终端在线自适应资源调度算法：OARSA的过载控制与性能提升
在面对独占型资源，如CPU或内存，OARSA采用了动态优先级抢占式调度策略。这种方法考虑了资源的特点和应用程序的优先级，通过实时调整优先级来避免资源争夺，从而减少冲突的发生，确保系统的稳定运行。 对于共享型...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值