安装测试kafka-3.0.0

最新推荐文章于 2025-04-01 17:21:49 发布

不饿同学

最新推荐文章于 2025-04-01 17:21:49 发布

阅读量2.1k

点赞数

分类专栏：大数据文章标签： kafka 分布式

本文链接：https://blog.csdn.net/qq_36048223/article/details/122348403

版权

本文档详细介绍了如何安装Kafka 3.0.0，包括下载、解压、配置server.properties、环境变量设置、启动脚本编写以及测试创建和使用topic的过程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.下载

 wget https://dlcdn.apache.org/kafka/3.0.0/kafka_2.12-3.0.0.tgz --no-check-certificate

2.解压并同步到其他节点

tar -zxvf kafka_2.12-3.0.0.tgz -C ../src

pscp -h /node.list -r kafka_2.12-3.0.0 /opt/src/
pssh -h /node.list -i ls /opt/src/
pssh -h /node.list -i ln -s /opt/src/kafka_2.12-3.0.0 /opt/src/kafka

在这里插入图片描述

3.修改配置

修改 server.properties

vim /opt/src/kafka/config/server.properties

分别配置
node001:

broker.id=0
listeners=PLAINTEXT://node001:9092
zookeeper.connect=node001:2181,node002:2181,node003:2181

node002:

broker.id=1
listeners=PLAINTEXT://node002:9092
zookeeper.connect=node001:2181,node002:2181,node003:2181

node003:

broker.id=2
listeners=PLAINTEXT://node003:9092
zookeeper.connect=node001:2181,node002:2181,node003:2181

4.配置环境变量同步到其他节点并激活

vim /root/.bashrc

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

不饿同学

关注关注

0
点赞
踩
3

收藏

觉得还不错? 一键收藏
3
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Kafka安装部署（3.0.0）

weixin_55527323的博客

12-07

530

kafka安装+基本操作 3）进入到/opt/module/kafka目录，修改配置文件将下面加引号的内容更改： 4）分发安装包 5）分别在hadoop103和hadoop104上修改配置文件/opt/module/kafka/config/server.properties中的broker.id=1、broker.id=2 6**）**配置环境变量（1）在/etc/profile.d/my_env.

Windows下安装Kafka3

崔杰城的博客

03-12

1376

本文讲述Windows(win10)下安装Kafka3的方法。基本流程跟《》一样，也是一样需要先安装Java环境，再部署部署Kafka。首先在官网下载Kafka二进制压缩包。无论是在CentOS还是在Windows下都是下载该压缩包，里面已经包含了Kafka Linux和windows平台下的可执行文件了。选择目前比较新的3.6.1版本下载。

3 条评论您还未登录，请先登录后发表或查看评论

kafka3.0安装使用

weixin_35815479的博客

03-05

1216

Kafka是一个分布式的基于发布订阅模式的消息队列MessageQueue），主要应用于大数据实时处理领域。

Windows快速安装 kafka 3.1.0

最新发布

a15969091614的博客

04-01

2847

jdk安装请参考本人其他博客 1、下载本人打包好的kafka安装包下载地址：链接：https://share.weiyun.com/MyB2BIPB 密码：chouli 2、解压压缩包后进入文件夹 3、点击 1.第一步启动zookeeper启动zookeeper zookeeper启动后控制台输出 4、点击2.第二步启动kafka启动kafka kafka启动后控制台输出至此kafka安装启动完成 ...

Kafka3.0.0安装使用教程

YMY_666的博客

08-17

2359

先启动zookeeper,加-daemon是后台启动，不加就只是命令界面启动，kafka同理。zookeeper.properties配置不用动,如果端口占用可以修改一下端口。tar -zxvf kafka_2.12-3.0.0.tgz解压。编辑kafka的server.properties。去kafka官网下载3.0.0版本。将压缩包上传到服务器。......

kafka系列（3）- kafka的安装

不管多累生活也要精致

03-29

392

码字不易，先赞后看，文末有大量学习资源哦，免费领取。如果觉得内容不错，别忘记一键三连哦！！！给大家准备的各类书籍都在这里啦，收集不易，期待您的一键三连，后续还会更新文章哦，谢谢您的关注和点赞，您的点赞会让我有加倍动力链接：https://pan.baidu.com/s/1MH1eiwMv_XCCbFX3hwGu7g 提取码：70uy https://shimo.im/docs/863dvkxgWHtwcWkh/ 《书籍》 ...

1、kafka（2.12-3.0.0）介绍、部署及验证、基准测试

05-29

在本文中，作者将逐步指导读者了解 Kafka 的基础知识，包括安装步骤、验证运行情况，以及如何执行基准测试。读者需要预先设置好 ZooKeeper 服务，并实现主机间的免密登录。作者提供的其他相关文章，如 Java API 的...

在虚拟机使用的Kafka-2.12-3.0.0

11-11

对于想要在虚拟机中部署和使用Kafka的用户，了解如何正确安装、配置和优化Kafka-2.12-3.0.0版本是至关重要的。通过在虚拟机中运行Kafka，用户可以更安全、灵活地测试和开发Kafka应用，同时利用Kafka强大的数据处理...

最新版linux kafka_2.12-3.0.0.gz

09-23

**Linux上的Kafka 3.0.0：深入理解与应用** Kafka是Apache软件基金会开发的一个开源流处理平台，最初由LinkedIn设计并贡献。它是一个分布式、分区的、复制的消息队列，专为处理实时数据流而设计。最新版的Kafka ...

KAFKA最新版 3.0.0集群部署测试

oMaFei的博客

12-06

3428

关于kafka的信息可以参考官方文档： https://kafka.apache.org/documentation/ (如果英文不好直接右击翻译成中文就可以，比看网上一堆文章都强) 环境信息： IP 角色 10.0.83.71 zookeeper、kafka 10.0.83.72 zo...

CentOS下安装Kafka3

崔杰城的博客

03-03

1320

kafka是分布式消息队列，本文讲述其在centos（centos 7.5）下的安装。安装过程可以参考其官方文档首先在官网下载Kafka二进制文件（官网的压缩包里面已经包含了Linux和windows的Kafka可执行文件了），选择目前比较新的3.6.1版本下载。

kafka-manager3.0.0.4安装包（编译后）

12-16

kafka-manager编译后的安装包，直接解压安装，免编译！

3.Kafka集群安装

guachiqi2340的博客

06-15

396

kafka安装安装包下载地址：http://kafka.apache.org/downloads.html 解压安装包 tar -zxvf kafka_2.12-2.8.0.tgz 安装zookeeper 单机安装参考：2.zookeeper单机安装集群部署参考：10.zookeeper集群修改kafka配置文件 #broker的全局唯一整数编号，不能重复 broker.id=0 #开启删除topic功能使能，默认为false不开启 delete.topic.enable=true

kafka3.x 入门安装（一）

weixin_43205308的博客

06-26

458

路径默认使用的是临时路径，肯定要改，不然会造成数据丢失，根据自己情况配置，我是配置到我的安装路径。这个每一台kafka节点都要修改(broker),且得保持不一样。这里使用的是kafka_2.12-3.0.0.tgz。修改zookeeper连接地址，根据自己情况配置。进入到安装路径的config文件夹下。

Kafka3.0.0教程（从入门到调优，深入全面）

桑凯旋的博客

05-04

5044

文章目录第 1 章 Kafka 概述1.1 定义1.2 消息队列1.2.1 传统消息队列的应用场景1.2.2 消息队列的两种模式1.3 Kafka 基础架构第 2 章 Kafka 快速入门2.1 安装部署2.1.1 集群规划2.1.2 zookeeper集群部署2.1.3 kafka集群部署2.1.4 集群启停脚本2.2 Kafka 命令行操作2.2.1 主题命令行操作2.2.2 生产者命令行操作2.2.3 消费者命令行操作第 3 章 Kafka 生产者3.1 生产者消息发送流程3.1.1 发送原理3.1.

Kafka3.0.0版本——Broker（服役新节点）示例

小志的博客

08-09

476

Kafka3.0.0版本——Broker（服役新节点）示例

Kafka3.0.0单机安装及简单使用

努力努力再努力！的博客

03-11

8228

1.下载Kafka3.0.0 下载地址：Kafka下载我下载的是kafka_2.12-3.0.0.tgz 版本的，本文也是基于此版本。 2.安装下载完成后上传到linux后，进行解压，命令： tar -zxf kafka_2.12-3.0.0.tgz 然后进入解压后的目录，创建logs文件夹 cd kafka_2.12-3.0.0/ mkdir logs 之后进入config目录，修改 server.properties 的如下内容： listeners=PLAINTEXT://localhost

Apache Kafka -3 安装步骤

maxcode

07-15

1037

Apache Kafka教程之 Apache Kafka - 安装步骤个人博客地址： http://blogxinxiucan.sh1.newtouch.com/2017/07/13/Apache-Kafka-安装步骤/Apache Kafka - 安装步骤步骤1 - 验证Java安装希望您现在已经在您的计算机上安装了Java，所以您只需使用以下命令进行验证。$ java -version 如果

kafka3.0安装、常用命令、API、同异步、分区、事务

舒服了

08-18

602

kafka的安装、常用命令、API、同异步、分区、事务

kafka-入门篇头歌

12-28

### 关于Kafka入门教程 #### 安装与配置Kafka环境为了开始学习Kafka，了解如何在本地环境中设置Kafka是非常重要的。通过wget命令可以从Apache官方网站下载指定版本的Kafka压缩包[^1]： ```bash wget https://downloads.apache.org/kafka/3.0.0/kafka_2.13-3.0.0.tgz ``` 解压该文件并进入对应的目录完成初步部署工作: ```bash tar -xzf kafka_2.13-3.0.0.tgz cd kafka_2.13-3.0.0 ``` 对于Kafka的服务端配置而言，在`config/server.properties`中可以找到默认监听地址设置项。如果希望外部网络能够访问到这台服务器上的Kafka实例，则需修改此属性为实际IP地址以及开放给客户端连接使用的端口号，例如: ```properties KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.100.102:9092 ``` 上述操作确保了Kafka集群中的节点可以通过正确的网络接口被其他应用程序发现和通信。 #### 启动服务组件启动Zookeeper服务作为协调者来管理Kafka broker之间的协作关系；接着再开启Kafka server本身以便处理消息生产和消费请求。具体指令如下所示： ```bash bin/zookeeper-server-start.sh config/zookeeper.properties & bin/kafka-server-start.sh config/server.properties & ``` #### 创建主题与生产测试数据创建一个新的topic用于存储特定类型的事件流记录，并利用控制台producer工具向其中发送几条简单的字符串形式的消息样本进行验证： ```bash bin/kafka-topics.sh --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1 --topic test-topic-name echo "This is a message" | bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test-topic-name ``` 以上步骤展示了从零构建起一个简易版但功能完整的Kafka系统的全过程，这对于初学者来说是一个很好的起点去理解分布式消息队列的工作原理及其应用场景。