Kubernetes - 实战：k8s高可用集群haproxy+k8s

在Kubernetes (k8s) 高可用集群中，使用HAProxy作为入口负载均衡器是一个常见的做法。以下是如何在实践中部署和配置HAProxy与Kubernetes配合工作的简要步骤：

1. 准备Kubernetes高可用集群

首先，你需要构建一个多主节点的Kubernetes集群。这通常涉及至少3个Master节点，并使用如Keepalived和HAProxy来实现API服务器的高可用性和负载均衡。

2. 安装和配置Keepalived

• 在每个Master节点上安装Keepalived，并配置VIP（虚拟IP地址）。当主节点发生故障时，VIP会漂移到另一个健康的Master节点上，确保API服务器始终可用。

# 安装Keepalived
sudo yum install -y keepalived

# 配置Keepalived（示例配置）
sudo nano /etc/keepalived/keepalived.conf

3. 配置HAProxy

• 在至少两个独立的节点上安装HAProxy，用于前端代理和负载均衡Kubernetes API服务器。

sudo yum install -y haproxy

• 配置HAProxy监听Kubernetes API服务器的VIP，并将请求转发至所有Master节点的API服务器。

# /etc/haproxy/haproxy.cfg（示例配置）
global
    log /dev/log local0 info
    chroot /var/lib/haproxy
    pidfile /var/run/haproxy.pid
    maxconn 4000
    user haproxy
    group haproxy

defaults
    mode tcp
    timeout connect 5000ms
    timeout client 50000ms
    timeout server 50000ms

frontend k8s-api
    bind <VIP>:6443 ssl crt /path/to/cert.pem no-sslv3
    default_backend k8s-masters

backend k8s-masters
    balance roundrobin
    option ssl-hello-chk
    server master1 <MASTER1_IP>:6443 check ssl verify none
    server master2 <MASTER2_IP>:6443 check ssl verify none
    server master3 <MASTER3_IP>:6443 check ssl verify none

4. 启动和验证HAProxy与Keepalived

• 启动并启用Keepalived和HAProxy服务。

sudo systemctl start keepalived
sudo systemctl enable keepalived
sudo systemctl start haproxy
sudo systemctl enable haproxy

• 检查服务状态并确保VIP已绑定到正确的节点。

5. 配置客户端和Kubernetes工具

• 配置kubectl和其他与Kubernetes通信的工具，指向HAProxy的VIP而非单个API服务器地址。

export KUBECONFIG=~/.kube/config
kubectl config set-cluster my-cluster --server=https://<VIP>:6443 --certificate-authority=/path/to/ca.pem

6. 高可用性测试

• 测试高可用性，例如模拟一个Master节点宕机，验证VIP能否顺利切换到其他Master节点，同时客户端工具（如kubectl）仍能正常与集群交互。

以上是一个简化的部署流程概述，实际操作中还需要考虑安全性、健康检查、证书管理和更多细节。同时，请确保在实施过程中参照最新文档和最佳实践，因为随着Kubernetes和HAProxy版本的更新，配置和最佳实践可能有所改变。