Kafka学习笔记(1) - CDH6.2 集群安装Kafka服务步骤以及问题解决方法

1. 修改配置 [重点!] 📖

进入CDH的安装包仓库 进入Kafka 的配置文件目录 修改 server.properties 配置文件 . 路径参考如下 :

/opt/cloudera/parcels/KAFKA/etc/kafka/conf.dist

修改其中的 broker.id 的配置,

注意: 你需要使用的kafka所有节点都需要配置 !
注意 : 每个节点的id不能一样 !

---

2. 添加服务

安装时选择第一个配置即可 , 第二个不用选

选择节点时选择配置了zookeepr服务的节点

然后下一步 到达kafka配置界面, 这个界面基本不需要配置什么东西

然后一直下一步 即可

安装成功 !

当然 ! 现实怎么可能如此顺利 !,如果你安装的时候遇到下面的问题

报错解决

如果报下面这种的错误 ! 这个是因为你之前安装kafka 错误,或者别的原因 在 kafka的 log和data目录下回生成 一个 meta.properties. 这个里面也有broker.id , 所以
解决方法 直接清空这两个目录即可

Configured broker.id 2 doesn't match stored broker.id 0 in meta.properties.

CDH6.2 默认的参考目录是

log :  /var/log/kafka/logs
data : /var/local/kafka/data 

把这两个目录的数据删除即可 , 目录仅供参考