K8S中如何实现故障注入？

在Kubernetes（K8s）中实现故障注入，主要是为了模拟真实环境中的各种异常情况以测试系统的健壮性和恢复能力。以下是一些实现原理和具体方式：

实现原理：

1. API级别故障模拟：
   Kubernetes提供了丰富的API资源，可以通过修改或操作这些资源来间接引入故障。例如，可以临时更改Pod的重启策略、更新Deployment的副本数、设置Node为不可调度状态等。

2. 服务网格层故障注入：
   对于采用服务网格如Istio的集群，故障注入可以在L7应用层通过控制平面进行。Istio使用VirtualService和DestinationRule资源定义网络流量的行为，并允许用户配置故障注入规则，比如HTTP请求延迟、重试失败或返回特定错误代码。

3. 混沌工程工具：
   专门针对云原生环境设计的混沌工程工具（如ChaosBlade、Litmus Chaos等），能够直接对Kubernetes平台上的各种组件进行故障注入。这些工具通常会通过调用Kubernetes API或与CRI兼容的方式与容器运行时交互，来模拟CPU压力、内存限制、磁盘I/O故障、网络延时或丢包等场景。

4. 自定义控制器/Operator：
   开发者可以编写自定义的Kubernetes控制器或Operator，监控集群内资源并根据预设条件触发故障注入行为。例如，当检测到某个Pod处于健康状态时，自动删除该Pod以模拟节点故障。

具体实现方式：

使用Istio进行网络故障注入

apiVersion: networking.istio.io/v1alpha3
kind: VirtualService
metadata:
  name: my-service
spec:
  hosts:
  - my-service.default.svc.cluster.local
  http:
  - route:
    - destination:
        host: my-service.default.svc.cluster.local
      subset: v1
    fault:
      delay:
        percentage:
          value: 100
        fixedDelay: 5s

上述YAML配置将为所有到my-service的HTTP请求增加5秒的固定延迟。

使用ChaosBlade注入CPU满载故障

blade create k8s pod-cpu chaos --pod-name <pod-name> --container-name <container-name> --cpu-percent 90 --kubeconfig ~/.kube/config

这条命令会在指定的Pod容器上注入CPU满载故障，占用90%的CPU资源。

自定义控制器注入故障

开发一个自定义控制器，监听特定事件或资源状态变化，并在其满足条件时执行故障注入逻辑。例如，创建一个Job来定期随机重启选定的Pod。

通过以上不同的方法，可以在Kubernetes环境中实施故障注入实验，从而帮助提升系统稳定性和容错性。