1、Daemon控制器
DaemonSet类型的控制器可以保证在集群中的每一台(或指定)节点上都运行一个副本。一般适用于日志收集、节点监控等场景。也就是说,如果一个Pod提供的功能是节点级别的(每个节点都需要且只需要一个),那么这类Pod就适合使用DaemonSet类型的控制器创建。
DaemonSet控制器的特点:
● 每当向集群中添加一个节点时,指定的 Pod 副本也将添加到该节点上
● 当节点从集群中移除时,Pod 也就被垃圾回收了
来看看DaemonSet的资源清单文件
apiVersion: apps/v1 # 版本号
kind: DaemonSet # 类型
metadata: # 元数据
name: # rs名称
namespace: # 所属命名空间
labels: #标签
controller: daemonset
spec: # 详情描述
revisionHistoryLimit: 3 # 保留历史版本
updateStrategy: # 更新策略
type: RollingUpdate # 滚动更新策略
rollingUpdate: # 滚动更新
maxUnavailable: 1 # 最大不可用状态的 Pod 的最大值,可以为百分比,也可以为整数
selector: # 选择器,通过它指定该控制器管理哪些pod
matchLabels: # Labels匹配规则
app: nginx-pod
matchExpressions: # Expressions匹配规则
- {key: app, operator: In, values: [nginx-pod]}
template: # 模板,当副本数量不足时,会根据下面的模板创建pod副本
metadata:
labels:
app: nginx-pod
spec:
containers:
- name: nginx
image: nginx:1.17.1
ports:
- containerPort: 80
创建一个pc-daemonset.yaml
[root@master 1.8+]# vi pc-dameonset.yaml
apiVersion: apps/v1
kind: DaemonSet
metadata:
name: pc-daemonset
namespace: dev
spec:
selector:
matchLabels:
app: nginx-pod
template:
metadata:
labels:
app: nginx-pod
spec:
containers:
- name: nginx
image: nginx:1.17.1
# 创建daemonset并查看
[root@master 1.8+]# kubectl create -f pc-dameonset.yaml
daemonset.apps/pc-daemonset created
[root@master 1.8+]# kubectl get daemonset -n dev
NAME DESIRED CURRENT READY UP-TO-DATE AVAILABLE NODE SELECTOR AGE
pc-daemonset 2 2 2 2 2 <none> 32s
3
[root@master 1.8+]# kubectl get pod -n dev -o wide
NAME READY STATUS RESTARTS AGE IP NODE NOMINATED NODE READINESS GATES
pc-daemonset-9n7w8 1/1 Running 0 29m 10.244.36.88 k8s-node1 <none> <none>
pc-daemonset-9x65g 1/1 Running 0 29m 10.244.169.149 k8s-node2 <none> <none>
#删除daemonset
2、Job
Job,主要用于负责批量处理(一次要处理指定数量任务)短暂的一次性(每个任务仅运行一次就结束)任务。Job特点如下:
● 当Job创建的pod执行成功结束时,Job将记录成功结束的pod数量
● 当成功结束的pod达到指定的数量时,Job将完成执行
Job的资源清单文件:
apiVersion: batch/v1 # 版本号
kind: Job # 类型
metadata: # 元数据
name: # rs名称
namespace: # 所属命名空间
labels: #标签
controller: job
spec: # 详情描述
completions: 1 # 指定job需要成功运行Pods的次数。默认值: 1
parallelism: 1 # 指定job在任一时刻应该并发运行Pods的数量。默认值: 1
activeDeadlineSeconds: 30 # 指定job可运行的时间期限,超过时间还未结束,系统将会尝试进行终止。
backoffLimit: 6 # 指定job失败后进行重试的次数。默认是6
manualSelector: true # 是否可以使用selector选择器选择pod,默认是false
selector: # 选择器,通过它指定该控制器管理哪些pod
matchLabels: # Labels匹配规则
app: counter-pod
matchExpressions: # Expressions匹配规则
- {key: app, operator: In, values: [counter-pod]}
template: # 模板,当副本数量不足时,会根据下面的模板创建pod副本
metadata:
labels:
app: counter-pod
spec:
restartPolicy: Never # 重启策略只能设置为Never或者OnFailure
containers:
- name: counter
image: busybox:1.30
command: ["bin/sh","-c","for i in 9 8 7 6 5 4 3 2 1; do echo $i;sleep 2;done"]
关于重启策略设置的说明:
如果指定为OnFailure,则job会在pod出现故障时重启容器,而不是创建pod,failed次数不变
如果指定为Never,则job会在pod出现故障时创建新的pod,并且故障pod不会消失,也不会重启,failed次数加1
如果指定为Always的话,就意味着一直重启,意味着job任务会重复去执行了,当然不对,所以不能设置为Always
创建pc-job.yaml
[root@master 1.8+]# vi pc-job.yaml
apiVersion: batch/v1
kind: Job
metadata:
name: pc-job
namespace: dev
spec:
manualSelector: true
selector:
matchLabels:
app: counter-pod
template:
metadata:
labels:
app: counter-pod
spec:
restartPolicy: Never
containers:
- name: counter
image: busybox:1.30
command: ["bin/sh","-c","for i in 9 8 7 6 5 4 3 2 1; do echo $i;sleep 3;done"]
# 查看job
[root@master 1.8+]# kubectl get job -n dev
NAME COMPLETIONS DURATION AGE
pc-job 0/1 47s 47s
[root@master 1.8+]# kubectl get pod -n dev -w
NAME READY STATUS RESTARTS AGE
pc-job-7flxk 0/1 Completed 0 60s
[root@master 1.8+]# kubectl get job -n dev
NAME COMPLETIONS DURATION AGE
pc-job 1/1 61s 2m3s
# 接下来,调整下pod运行的总数量和并行数量 即:在spec下设置下面两个选项
# completions: 6 # 指定job需要成功运行Pods的次数为6
# parallelism: 3 # 指定job并发运行Pods的数量为3
# 然后重新运行job,观察效果,此时会发现,job会每次运行3个pod,总共执行了6个pod
[root@master 1.8+]# kubectl get job -n dev -w
NAME COMPLETIONS DURATION AGE
pc-job 0/6 5s 5s
pc-job 0/6 29s 29s
pc-job 1/6 29s 29s
pc-job 1/6 29s 29s
pc-job 2/6 29s 29s
pc-job 2/6 29s 29s
pc-job 3/6 29s 29s
pc-job 3/6 58s 58s
pc-job 4/6 58s 58s
pc-job 4/6 59s 59s
pc-job 5/6 59s 59s
pc-job 5/6 59s 59s
pc-job 6/6 59s 59s
# 监听Pod
[root@master ~]# kubectl get pod -n dev -w
NAME READY STATUS RESTARTS AGE
pc-job-b8grh 0/1 Pending 0 0s
pc-job-b8grh 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Pending 0 0s
pc-job-8jfpw 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Pending 0 0s
pc-job-8jfpw 0/1 Pending 0 0s
pc-job-b8grh 0/1 ContainerCreating 0 0s
pc-job-8jfpw 0/1 ContainerCreating 0 0s
pc-job-zcqh4 0/1 ContainerCreating 0 0s
pc-job-8jfpw 0/1 ContainerCreating 0 1s
pc-job-b8grh 0/1 ContainerCreating 0 1s
pc-job-zcqh4 0/1 ContainerCreating 0 1s
pc-job-8jfpw 1/1 Running 0 1s
pc-job-zcqh4 1/1 Running 0 2s
pc-job-b8grh 1/1 Running 0 2s
pc-job-8jfpw 0/1 Completed 0 29s
pc-job-l75jw 0/1 Pending 0 0s
pc-job-l75jw 0/1 Pending 0 0s
pc-job-8jfpw 0/1 Completed 0 29s
pc-job-l75jw 0/1 ContainerCreating 0 0s
pc-job-8jfpw 0/1 Completed 0 29s
pc-job-b8grh 0/1 Completed 0 29s
pc-job-59ck7 0/1 Pending 0 0s
pc-job-59ck7 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Completed 0 29s
pc-job-b8grh 0/1 Completed 0 29s
pc-job-59ck7 0/1 ContainerCreating 0 0s
pc-job-f88x7 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Completed 0 29s
pc-job-f88x7 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Completed 0 29s
pc-job-b8grh 0/1 Completed 0 29s
pc-job-f88x7 0/1 ContainerCreating 0 0s
pc-job-l75jw 0/1 ContainerCreating 0 1s
pc-job-l75jw 1/1 Running 0 2s
pc-job-59ck7 0/1 ContainerCreating 0 2s
pc-job-f88x7 0/1 ContainerCreating 0 2s
pc-job-59ck7 1/1 Running 0 3s
pc-job-f88x7 1/1 Running 0 3s
pc-job-l75jw 0/1 Completed 0 29s
pc-job-l75jw 0/1 Completed 0 29s
pc-job-l75jw 0/1 Completed 0 29s
pc-job-f88x7 0/1 Completed 0 30s
pc-job-f88x7 0/1 Completed 0 30s
pc-job-59ck7 0/1 Completed 0 30s
pc-job-59ck7 0/1 Completed 0 30s
pc-job-f88x7 0/1 Completed 0 30s
pc-job-59ck7 0/1 Completed 0 30s
3、Cornjob(CJ)
CronJob控制器以Job控制器资源为其管控对象,并借助它管理pod资源对象,Job控制器定义的作业任务在其控制器资源创建之后便会立即执行,但CronJob可以以类似于Linux操作系统的周期性任务作业计划的方式控制其运行时间点及重复运行的方式。也就是说,CronJob可以在特定的时间点(反复的)去运行job任务。
# CronJob的资源清单文件:
apiVersion: batch/v1beta1 # 版本号
kind: CronJob # 类型
metadata: # 元数据
name: # rs名称
namespace: # 所属命名空间
labels: #标签
controller: cronjob
spec: # 详情描述
schedule: # cron格式的作业调度运行时间点,用于控制任务在什么时间执行
concurrencyPolicy: # 并发执行策略,用于定义前一次作业运行尚未完成时是否以及如何运行后一次的作业
failedJobHistoryLimit: # 为失败的任务执行保留的历史记录数,默认为1
successfulJobHistoryLimit: # 为成功的任务执行保留的历史记录数,默认为3
startingDeadlineSeconds: # 启动作业错误的超时时长
jobTemplate: # job控制器模板,用于为cronjob控制器生成job对象;下面其实就是job的定义
metadata:
spec:
completions: 1
parallelism: 1
activeDeadlineSeconds: 30
backoffLimit: 6
manualSelector: true
selector:
matchLabels:
app: counter-pod
matchExpressions: 规则
- {key: app, operator: In, values: [counter-pod]}
template:
metadata:
labels:
app: counter-pod
spec:
restartPolicy: Never
containers:
- name: counter
image: busybox:1.30
command: ["bin/sh","-c","for i in 9 8 7 6 5 4 3 2 1; do echo $i;sleep 20;done"]
# 需要重点解释的几个选项:
schedule: cron表达式,用于指定任务的执行时间
*/1 * * * *
<分钟> <小时> <日> <月份> <星期>
分钟 值从 0 到 59.
小时 值从 0 到 23.
日 值从 1 到 31.
月 值从 1 到 12.
星期 值从 0 到 6, 0 代表星期日
多个时间可以用逗号隔开; 范围可以用连字符给出;*可以作为通配符; /表示每...
concurrencyPolicy:
Allow: 允许Jobs并发运行(默认)
Forbid: 禁止并发运行,如果上一次运行尚未完成,则跳过下一次运行
Replace: 替换,取消当前正在运行的作业并用新作业替换它
创建pc-cronjob.yaml
[root@master 1.8+]# kubectl create -f pc-cronjob.yaml
Warning: batch/v1beta1 CronJob is deprecated in v1.21+, unavailable in v1.25+; use batch/v1 CronJob
cronjob.batch/pc-cronjob created
\\\
apiVersion: batch/v1beta1
kind: CronJob
metadata:
name: pc-cronjob
namespace: dev
labels:
controller: cronjob
spec:
schedule: "*/1 * * * *"
jobTemplate:
metadata:
spec:
template:
spec:
restartPolicy: Never
containers:
- name: counter
image: busybox:1.30
command: ["bin/sh","-c","for i in 9 8 7 6 5 4 3 2 1; do echo $i;sleep 3;done"]
[root@master 1.8+]# kubectl get cj -n dev
NAME SCHEDULE SUSPEND ACTIVE LAST SCHEDULE AGE
pc-cronjob */1 * * * * False 0 <none> 26s
监控一下cronjob和job
[root@master ~]# kubectl get job -n dev -w
NAME COMPLETIONS DURATION AGE
pc-cronjob-27510232 1/1 28s 2m1s
pc-cronjob-27510233 1/1 29s 61s
pc-cronjob-27510234 0/1 1s 1s
pc-cronjob-27510234 0/1 28s 28s
pc-cronjob-27510234 1/1 28s 28s
pc-cronjob-27510235 0/1 0s
pc-cronjob-27510235 0/1 0s 0s
pc-cronjob-27510235 0/1 29s 29s
pc-cronjob-27510235 1/1 29s 29s
pc-cronjob-27510232 1/1 28s 3m29s
pc-cronjob-27510236 0/1 0s
pc-cronjob-27510236 0/1 0s 0s
pc-cronjob-27510236 0/1 28s 28s
pc-cronjob-27510236 1/1 28s 28s
[root@master ~]# kubectl get cj -n dev -w
NAME SCHEDULE SUSPEND ACTIVE LAST SCHEDULE AGE
pc-cronjob */1 * * * * False 0 50s 2m40s
pc-cronjob */1 * * * * False 1 0s 2m50s
pc-cronjob */1 * * * * False 0 28s 3m18s
pc-cronjob */1 * * * * False 0 28s 3m18s
pc-cronjob */1 * * * * False 1 0s 3m50s
pc-cronjob */1 * * * * False 0 29s 4m19s
pc-cronjob */1 * * * * False 0 29s 4m19s
pc-cronjob */1 * * * * False 1 0s 4m50s
pc-cronjob */1 * * * * False 0 28s 5m18s
pc-cronjob */1 * * * * False 0 28s 5m18s
pc-cronjob */1 * * * * False 1 0s 5m50s
pc-cronjob */1 * * * * False 0 29s 6m19s
pc-cronjob */1 * * * * False 0 29s 6m19s
pc-cronjob */1 * * * * False 1 0s 6m50s
pc-cronjob */1 * * * * False 0 29s 7m19s
pc-cronjob */1 * * * * False 0 29s 7m19s
pc-cronjob */1 * * * * False 1 0s 7m50s
pc-cronjob */1 * * * * False 0 29s 8m19s
pc-cronjob */1 * * * * False 0 29s 8m19s
pc-cronjob */1 * * * * False 1 0s 8m50s
pc-cronjob */1 * * * * False 0 29s 9m19s
pc-cronjob */1 * * * * False 0 29s 9m19s
pc-cronjob */1 * * * * False 1 0s 9m50s
# 删除cronjob
[root@master 1.8+]# kubectl delete -f pc-cronjob.yaml
Warning: batch/v1beta1 CronJob is deprecated in v1.21+, unavailable in v1.25+; use batch/v1 CronJob
cronjob.batch "pc-cronjob" deleted