【二进制部署k8s-1.29.4】九、cilium1.15.4安装

简介

本章节主要讲解k8s集群网络插件cni的安装，安装的版本是cilium-1.15.4，本文主要讲解对ciium的安装方式，以及cilium各个安装参数的解释。

第一章.安装前软件准备及系统初始化阶段
第二章.证书及配置文件的准备
第三章.etcd集群的安装配置

一.安装helm和cilium 客户端命令

cilium的cni通过helm来进行安装，所以首先安装helm，helm的安装在第二章中"安装客户端软件及命令"中有提到，如果没有安装可以在https://github.com/helm/helm/releases/latest 下载二进制文件放到/usr/bin目录下即可。

cilium的客户端命令安装：cilium的客户端命令在第二章中有讲解，也是通过https://github.com/cilium/cilium 下载可执行文件放到/usr/bin下,这是指cilium客户端命令的安装。

二.安装cilium

此处的安装是指安装网络插件cni,

2.1.安装cilium对于系统内核的版本的要求

参考如下图：

2.2.安装的命令及参数如下：

添加helm 安装的 chart地址

helm repo add ali-incubator     https://aliacs-app-catalog.oss-cn-hangzhou.aliyuncs.com/charts-incubator/ 
helm repo add ali-stable    https://kubernetes.oss-cn-hangzhou.aliyuncs.com/charts
helm repo add cilium https://helm.cilium.io/

执行安装命令：

helm install cilium cilium/cilium --version 1.15.4 \
  --namespace kube-system \
  --set routingMode=native \
  --set autoDirectNodeRoutes=true \
  --set loadBalancer.mode=hybrid \
  --set loadBalancer.acceleration=native \
  --set bpf.masquerade=true \
  --set kubeProxyReplacement="true" \
  --set ipv4NativeRoutingCIDR=10.2.0.0/16 \
  --set k8sServiceHost=yt-pcauto-k8s.pc.com.cn \
  --set k8sServicePort=6443 \
  --set bandwidthManager.enabled=true \
  --set bandwidthManager.bbr=true \
  --set prometheus.enabled=true \
  --set operator.prometheus.enabled=true \
  --set hubble.relay.enabled=true \
  --set hubble.ui.enabled=true \
  --set ipam.operator.clusterPoolIPv4PodCIDRList=10.2.0.0/16 \
  --set ipam.operator.clusterPoolIPv4MaskSize=24 \
  --set hubble.metrics.enabled="{dns,drop,tcp,flow,icmp,port-distribution,http}"

参数注释：

routingMode=native #启用本地路由(Native Routing)，native routing和vxlan模式的区别主要是跨节点通信时，vxlan模式需要封装，native routing模式需要根据目的ip查找路由表转发到其他节点。
autoDirectNodeRoutes=true #表示由cilium在主机上生成Pod的路由规则
loadBalancer.mode=hybrid #hybrid模式时：DSR用于TCP，SNAT用于UDP以避免另外需要的MTU减少。dsr在公有云可能不起作用
loadBalancer.acceleration=native #启用XDP 加速南北向 nodePort 访问
bpf.masquerade=true #IP 地址伪装(Masquerading)切换为基于 eBPF 的模式
kubeProxyReplacement=“true” #替换kube-proxy
bandwidthManager.enabled=true #启用带宽管理功能，用于进行带宽限速
bandwidthManager.bbr=true #启用 Pod 的 BBR 网络阻塞控制
prometheus.enabled=true #启用promes监控
hubble.relay.enabled=true #启用hubble.relay来观测流量
hubble.ui.enabled=true #观测流量的ui

helm安装cilium时可以通过此命令查看安装帮助：helm show values cilium/cilium

三.确认cilium的安装状态

1.cilium status

2.kubectl exec -it -n kube-system ds/cilium -- cilium status --verbose

查看cilium配置：kubectl get cm cilium-config -n kube-system -o yaml
重启cilium进程命令：kubectl -n kube-system rollout restart ds/cilium

注意事项
此时的coredns还没安装，会报错：time=“2024-05-11T12:45:31Z” level=warning msg=“Failed to create peer client for peers synchronization; will try again after the timeout has expired” error=“context deadline exceeded” subsys=hubble-relay target=“hubble-peer.kube-system.svc.cluster.local:443”
这是解析错误导致，安装完coredns,然后杀掉hubble-relay 的pod后就正常了

四.访问cilium的监控页面hubble-ui

将 Hubble UI 改为 NodePort 访问即可
kubectl -n kube-system patch svc hubble-ui -p '{"spec": {"type": "NodePort"}}'