linux系统安装kafka(新版本3.7.0)

1、安装包下载

wget https://downloads.apache.org/kafka/3.7.0/kafka_2.13-3.7.0.tgz

注意事项:kafka会用到jdk,kafka_2.13-3.7.0版本的kafka不再支持jdk8,我这里用的jdk11
openjdk11下载1:https://mirrors.tuna.tsinghua.edu.cn/Adoptium/11/jdk/x64/linux/
openjdk11下载2:https://learn.microsoft.com/zh-cn/java/openjdk/download
我的解压目录/usr/local/jdk-11.0.23+9

2、安装

我安装到 /usr/local目录下了
cs /usr/local
#解压
tar -xzf kafka_2.13-3.7.0.tgz
cd kafka_2.13-3.7.0

首先要启动ZooKeeper服务,因为Kafka使用ZooKeeper,新版本中kafka集成了zookeeper

3、配置zookeeper.properties

配置kafka_2.13-3.7.0/config下的“zookeeper.properties”:
修改dataDir和clientPort:前者是快照存放地址(自己随意配置),后者是客户端连接zookeeper服务的端口。默认端口2181

#创建一个目录
mkdir zookeeper-data
#修改文件路径为:
dataDir=/usr/local/kafka_2.13-3.7.0/zookeeper-data

截图如下:
在这里插入图片描述

4、配置server.properties

配置kafka_2.13-3.7.0/config下的“server.properties”:
修改log.dirs和zookeeper.connect。前者是日志存放文件夹,后者是zookeeper连接地址(端口和clientPort保持一致)

创建一个目录:
mkdir kafka-logs

修改配置:
#日志目录
log.dirs=/usr/local/kafka_2.13-3.7.0/kafka-logs
#zookeeper连接地址
zookeeper.connect=localhost:2181

注意:若需要外部访问,一定需要配置listeners , 默认为本机IP 、端口默认9092。

截图:
在这里插入图片描述

在这里插入图片描述

5、启动

由于我的服务器有其他程序用jdk8,并配置了环境变量,所以在启动之前,我要修改脚本中使用jdk的路径:
修改:kafka-run-class.sh
在文件开始位置指定JAVA_HOME位置,文件中会用到

export JAVA_HOME=/usr/local/jdk-11.0.23+9

截图:
在这里插入图片描述

# 后台启动zookeeper,指定启动日志
nohup ./bin/zookeeper-server-start.sh ./config/zookeeper.properties > ./zookeeper-run.log 2>&1 &
# 后台启动kafka,指定启动日志
nohup ./bin/kafka-server-start.sh ./config/server.properties > ./kafka-run.log 2>&1 &

现在,Kafka单机版已经安装并运行。你可以使用内置的命令行工具来创建主题、生产消息和消费消息。

6、测试使用

创建主题:

bin/kafka-topics.sh --create --topic test --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1

生产消息:

bin/kafka-console-producer.sh --topic test --bootstrap-server localhost:9092

消费消息

bin/kafka-console-consumer.sh --topic test --bootstrap-server localhost:9092 --from-beginning

以上步骤在一台机器上完成了Kafka的基本安装和运行。如果你需要在生产环境中使用Kafka,你可能需要考虑配置Kafka集群或者使用更高级的管理和监控工具。

7、停止服务

先停止kafka

bin/kafka-server-stop.sh 

再停止zookeeper:

bin/zookeeper-server-stop.sh  

8、报错解决

在这里插入图片描述
配置文件中配置监听

listeners = PLAINTEXT://服务器ip:9092

9、漏洞修复

在zookeeper.properties中添加clientPortAddress=127.0.0.1

  • 5
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 6
    评论
为了在Linux系统安装Kafka,你需要首先确保你的系统已经安装了JDK 1.8,并且配置好了Java环境变量。此外,你还需要安装Zookeeper,Kafka会使用Zookeeper进行内部操作,你可以在Kafka官网下载Linux压缩包进行安装。 在安装Kafka之前,你需要准备好一些工具,其中包括Java。确保你已经安装了所需的Java版本。 安装完成后,你可以启动Kafka。进入Kafka目录,执行"bin/kafka-server-start.sh -daemon config/server.properties"命令来启动Kafka服务器。使用"jps"命令可以查看Kafka是否已经成功启动。 通过以上步骤,你就可以在Linux系统上成功安装Kafka了。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [Linux安装kafka](https://blog.csdn.net/yiqiu1959/article/details/126415789)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] - *2* [Linux安装Kafka](https://blog.csdn.net/2301_77498991/article/details/130589391)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 6
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值