Kafka集群安装和使用

Kafka集群安装

安装Kafka之前需安装Zookeeper：https://hubaoquan.cn/zookeeperanzhuangjijiandanshiyong/

1.集群规划

ip:10.7.68.213 主机名：ecs-az3-yc-0020 实例id: broker.id=0
ip:10.7.68.188 主机名：ecs-az3-yc-0021 实例id: broker.id=1
ip:10.7.68.197 主机名：ecs-az3-yc-0022 实例id: broker.id=2

端口：9092
kafka版本为kafka_2.12-2.2.0.tgz

2.jar包下载

[root@ecs-az3-yc-0020 module]$ wget http://soft.hubaoquan.cn/kafka_2.12-2.2.0.tgz

3.kafka集群部署

1）解压安装包
[root@ecs-az3-yc-0020 module]$ tar -zxvf kafka_2.12-2.2.0.tgz
2）在/opt/module/kafkHa目录下创建logs文件夹
[root@ecs-az3-yc-0020 kafka_2.12-2.2.0]$ mkdir logs
3）修改配置文件
[root@ecs-az3-yc-0020 kafka_2.12-2.2.0]$ cd config/
[root@ecs-az3-yc-0020 config]$ vi server.properties
修改*标注内容其他根据主机环境，也可以保持默认：

#************broker.id的全局唯一编号，不能重复
broker.id=0

#开启删除topic功能
delete.topic.enable=true

#处理网络请求的线程数量​
num.network.threads=3
​
#用来处理磁盘IO的现成数量
num.io.threads=8
​
#发送套接字的缓冲区大小
socket.send.buffer.bytes=102400
​
#接收套接字的缓冲区大小
socket.receive.buffer.bytes=102400
​