k8s kafka集群 连接不上_k8s利用statefulset部署kafka集群（依赖zookeeper）

前言

最近在工作上调研k8s部署kafka集群的方案，顺带调研部署zookeeper方案。以下配置和部署方案都是亲测可用，有问题可以评论或私我解决。

kafka需要依赖zookeeper

kafka的生产者与消费者需要在zookeeper中注册，不然消费者怎么知道生产者是否存活之类的哈哈。废话不多说，直接上干货！

本文用的是statefulset和动态存储部署zookeeper和kafka集群。

部署zookeeper

apiVersion:v1kind:Servicemetadata:name:zk-headlessnamespace:liuleilabels:app:zkspec:ports:- port:2888name:server- port:3888name:leader-electionclusterIP:None #指定无头服务，需要对外暴露自行创建一个serviceselector:app:zk---apiVersion:policy/v1beta1kind:PodDisruptionBudgetmetadata:name:zk-pdbnamespace:liuleispec:selector:matchLabels:app:zkminAvailable:2---apiVersion:apps/v1kind:StatefulSetmetadata:name:zk #指定的zookeeper名称会在kafka.yaml里面用来配置和kafka连接，会创建pod为zk-0,zk-1,zk-2......这里只创建了三个namespace:liuleispec:selector:matchLabels:app:zkserviceName:zk-headlessreplicas:3updateStrategy:type:RollingUpdate # K8s 会将 StatefulSet 管理的 pod 分批次逐步替换掉podManagementPolicy:OrderedReady # 设置为Parallel这样Pod的创建就不必等待，而是会同时创建、同时删除template:metadata:labels:app:zkspec:containers:- name:k8s-zkimage:k8szk:1.0-3.4.10 #需要指定自己的镜像，可去阿里云上下载zookeeper镜像imagePullPolicy:Alwaysresources:requests:memory:"1Gi"cpu:"1000m"limits:memory:"1Gi"cpu:"1000m"ports:- containerPort:2181name:client- containerPort