kafka配置及启动等命令总结

本文详细介绍Kafka的配置步骤,包括server.properties文件的设置、环境变量配置及启动流程。涵盖Zookeeper启动、Kafka服务启动、topic创建与管理等关键操作。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

kafka配置

1、kafka配置server.properties文件

1.1、进入kafka的config目录下

在这里插入图片描述

1.2、然后进入server.properties进行配置

[root@cjh1 config]# vi ./server.properties

1.3、 通过显示行号进行查找并修改

 :set nu

在这里插入图片描述
然后分别在下面指定行号修改以下内容(137行是最后加上去的,方便删除topic)

36 advertised.listeners=PLAINTEXT://192.168.48.141:9092
60 log.dirs=/opt/bigdata/kafka211/kafka-logs
123 zookeeper.connect=192.168.48.141:2181
137 delete.topic.enable=true

效果图如下:
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

2、配置kafka环境变量

vi /etc/profile:
export KAFKA_HOME=/opt/bigdata/kafka211
export PATH=$PATH:$KAFKA_HOME/bin

kafka启动

ps:启动kafka前需要启动zookeeper

1、启动zookeeper

[root@cjh1 config]# zkServer.sh start

2、启动kafka

[root@cjh1 bin]# ./kafka-server-start.sh ../config/server.properties 
# 这是后台启动kafka,两者选其一即可
[root@cjh1 bin]# ./kafka-server-start.sh -daemon ../config/server.properties 

然后jps查看一下启动的服务

[root@cjh1 bin]# jps
2181 QuorumPeerMain
2872 Kafka
2941 Jps

# 创建topic
[root@cjh1 bin]# ./kafka-topics.sh --create --topic mydemo --zookeeper 192.168.48.141:2181 --partitions 1 --replication-factor 1 
Created topic "mydemo".

# 查看当前kafka中topic列表
[root@cjh1 bin]# kafka-topics.sh --zookeeper 192.168.48.141:2181 --list
mydemo

# 查看topic详细情况
[root@cjh1 bin]# kafka-topics.sh --describe --zookeeper 192.168.48.141:2181 --topic mydemo
Topic:mydemo	PartitionCount:1	ReplicationFactor:1	Configs:
	Topic: mydemo	Partition: 0	Leader: 0	Replicas: 0	Isr: 0

# 启动kafka消费者
[root@cjh1 /]# kafka-console-consumer.sh --bootstrap-server 192.168.48.141:9092 --topic mydemo --from-beginning

# 启动kafka生产者
[root@cjh1 /]# kafka-console-producer.sh --broker-list 192.168.48.141:9092 --topic mydemo

# 查看topic消息数量
[root@cjh1 kafka-logs]# kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list 192.168.48.141:9092 --topic mydemo --time -1 --offsets 1
mydemo:0:2

# 删除topic
[root@cjh1 kafka-logs]# kafka-topics.sh --delete --zookeeper 192.168.48.141:2181 --topic mydemo 

ps:删除topic的前提是需要将kafka的消费者和生产者停止。

ps:望多多支持,在下必再接再厉!!!

Kafka是一种流处理平台,通常用于实时数据流的处理和分析。它提供了一个可扩展的、高吞吐量的发布-订阅消息系统。启动Kafka通常需要使用Kafka的二进制安装包(tar.gz)进行配置启动。以下是一些启动Kafka的基本命令: 首先,需要进入Kafka安装目录,例如: ```bash cd /path/to/kafka ``` 然后,执行以下命令启动Kafka集群: 对于单机模式(单节点): ```bash ./bin/kafka-server-start.sh config/server.properties ``` 对于集群模式(多节点): 首先,需要创建Kafka配置文件(例如:`config/server.properties`),其中包含Kafka集群的配置信息。以下是一个基本的配置示例: ```properties # 服务器地址和端口 broker.id=0 listeners=PLAINTEXT://localhost:9092 # 存储日志的位置 log.dirs=/path/to/kafka/logs ``` 创建配置文件后,执行以下命令启动Kafka集群: ```bash ./bin/kafka-server-start.sh config/server.properties ``` 在执行以上命令时,Kafka将会启动一个Kafka服务器实例。请确保在启动之前已经正确安装了Kafka,并且配置文件中的路径和端口号是正确的。此外,还需要确保系统上已经安装了必要的依赖包,例如Zookeeper(如果使用Kafka集群模式)。 请注意,以上命令仅提供了一个基本的启动Kafka的示例。在实际使用中,可能还需要进行更多的配置和参数调整。具体配置信息可以参考Kafka的官方文档或相关资料。
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值