Kafka集群搭建指导

本文详细介绍了如何搭建Kafka集群,包括启动Zookeeper,配置及启动多个Kafka节点,修改配置文件如broker.id、listeners和log.dirs,创建及查看topic。遵循这些步骤,你可以成功建立一个包含三个服务的Kafka集群。
摘要由CSDN通过智能技术生成
  1. 下载并解压安装包:
    在这里插入图片描述
  2. 运行kafka之前需要先启动zookeeper,可以使用kafka自带打包和配置好的zookeeper

nohup bin/zookeeper-server-start.sh config/zookeeper.properties > zookeeper-run.log 2>&1 &
在这里插入图片描述

  1. 然后启动kafka

nohup bin/kafka-server-start.sh config/server.properties > kafka-run.log 2>&1 &
在这里插入图片描述

  1. 修改配置文件,首先拷贝配置文件

cp config/server.properties config/server-1.properties
cp config/server.properties config/server-2.properties

  1. 更改配置文件内容
    config/server-1.properties:

broker.id=1
listeners=PLAINTEXT://localhost:19092
log.dirs=/home/appkafka/kafka_2.11-2.0.0/logs/logs-1
advertised.port=19092

config/server-2.properties:

broker.id=2
listeners=PLAINTEXT://localhost:29092
log.dirs=/home/appkafka/kafka_2.11-2.0.0/logs/logs-2
advertised.port=29092

broker.id 是唯一标识符,而且是每一个集群的唯一值。

  1. 启动另外两个kafka服务:

nohup bin/kafka-server-start.sh config/server-1.properties > kafka-run-1.log 2>&1 &
nohup bin/kafka-server-start.sh config/server-2.properties > kafka-run-2.log 2>&1 &
在这里插入图片描述

  1. 查看进程,可以看到现在有3个kafka服务了
    在这里插入图片描述

  2. 创建topic

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test
在这里插入图片描述

  1. 查看topic

bin/kafka-topics.sh --describe --zookeeper localhost:2181 --topic test
在这里插入图片描述

  1. 查看所有topic

bin/kafka-topics.sh -list -zookeeper localhost:2181

  1. 其他
    Kafka配置文件:server.properties

delete.topic.enable=true
auto.create.topics.enable=true
在这里插入图片描述

kafka
集群搭建:https://www.cnblogs.com/mythdoraemon/p/10171883.html
单机安装:https://www.cnblogs.com/CoolJayson/p/10601515.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值