背景
我们经常需要在kubernetes中运行一些任务性质的Job或者Pod。在调试过程中,我们对日志有如下两个需求
- 需求一:日志输出到stdout。因为stdout的输出,可以非常方便的通过kubectl logs进行查看,结合图形化的界面,很容易看到Pod最后的堆栈或输出,不用kubectl exec -it进入Pod查看log。比如
- 需求二:日志持久化到文件(如 /tmp/t)。持久化的日志文件,为了便于做日志管理和日志追踪。
实现
写一个非常简单的例子,第一步先把日志输出到stdout,实现需求一
---
apiVersion: v1
kind: Pod
metadata:
name: usecase-logging
namespace: default
spec:
restartPolicy: Never
containers:
- name: usecase-logging
securityContext:
privileged: false
image: ccr.ccs.tencentyun.com/prometheus/busybox:latest
args: [/bin/sh, -c,
'i=0; while true; do echo "$i: $(date)"; i=$((i+1)); sleep 1; done ']
imagePullSecrets:
- name: qcloudregistrykey
securityContext:
runAsUser: 0
为了实现需求二,可以重定向stdout到文件。但是,这样会丢失到stdout的输出。
args: [/bin/sh, -c,
'i=0; while true; do echo "$i: $(date)"; i=$((i+1)); sleep 1; done > /tmp/t']
好在可以用tee命令,stdout + 持久化两不误。这样就可以了么?
args: [/bin/sh, -c,
'i=0; while true; do echo "$i: $(date)"; i=$((i+1)); sleep 1; done | tee /tmp/t']
实际使用中,tee命令前面运行的是业务逻辑,我们需要知道业务逻辑是否正确运行。下面的例子中,我故意“业务逻辑”的shell语法写错了,但是Pod仍然会正常返回(exit 0),这是因为后面的tee命令是exit 0的。
args: [/bin/sh, -c,
'i=0; while shangoucun true; do echo "$i: $(date)"; i=$((i+1)); sleep 1; done | tee /tmp/t']
可以使用”exit ${PIPESTATUS[0]}“,返回指定管道的返回值,可以看到这个Pod的返回结果应该是Error的。这样就完美了吗?
args: [/bin/sh, -c,
'i=0; while shangoucun true; do echo "$i: $(date)"; i=$((i+1)); sleep 1; done | tee /tmp/t; exit ${PIPESTATUS[0]}']
很不幸,在项目中我们还真的遇到了问题,因为项目的YAML是动态用正则表达式生成的,“exit ${PIPESTATUS[0]}”这个命令中的花括号等字符和正则表达式冲突了。我们知道修改正则表达式可以解决问题,但是由于不可描述的原因,还是使用了下面这种方法去解决上面的问题。即一个container用来写日志到文件,另一个container用tail来输出到stdout。全部YAML如下
---
apiVersion: v1
kind: Pod
metadata:
name: usecase-logging
namespace: default
spec:
restartPolicy: Never
containers:
- name: usecase-logging
securityContext:
privileged: false
image: ccr.ccs.tencentyun.com/prometheus/busybox:latest
args: [/bin/sh, -c,
'i=0; while true; do echo "$i: $(date)"; i=$((i+1)); sleep 1; done > /tmp/t']
volumeMounts:
- name: log
mountPath: /tmp
- name: persitent-log
image: ccr.ccs.tencentyun.com/prometheus/busybox:latest
args: [/bin/sh, -c, 'tail -f /tmp/t']
volumeMounts:
- name: log
mountPath: /tmp
imagePullSecrets:
- name: qcloudregistrykey
volumes:
- name: log
emptyDir: {}
securityContext:
runAsUser: 0
这样就真的没问题了吗?
原创不易,请保护版权。如需转载,请联系获得授权,并注明出处。