基于Zookeeper搭建Kafka高可用集群

基于Zookeeper搭建Kafka高可用集群

一、Zookeeper集群搭建

java安装参考: Linux下JDK的安装

zookeepe安装参考：Zookeeper单机环境和集群环境搭建

二、Kafka集群搭建

2.1 下载解压

Kafka 安装包官方下载地址：http://kafka.apache.org/downloads ，本用例下载的版本为 2.4.1，下载命令：

# 下载
wget https://www-eu.apache.org/dist/kafka/2.4.1/kafka_2.11-2.4.1.tgz
# 解压
tar -xzf kafka_2.11-2.4.1.tgz -C /opt/

这里解释一下 kafka 安装包的命名规则：以 kafka_2.11-2.4.1.tgz 为例，前面的 2.11 代表 Scala 的版本号（Kafka 采用 Scala 语言进行开发），后面的 2.4.1 则代表 Kafka 的版本号。

2.2 设置环境变量

在 hadoop-nn-01、hadoop-nn-02、hadoop-dn-01 三台机器设置环境变量