kafka_2.13-3.2.3操作与使用

Starry Sky丨

于 2024-07-29 14:21:11 发布

阅读量37

点赞数 1

文章标签： kafka

本文链接：https://blog.csdn.net/qq_36363976/article/details/140769997

版权

启动zookeeper：

保活启动：nohup ./zookeeper-server-start.sh -daemon ../config/zookeeper.properties &
使用默认命令启动：./zookeeper-server-start.sh ../config/zookeeper.properties &

启动kafka：

保活启动：nohup ./kafka-server-start.sh -daemon ../config/server.properties  &
默认配置文件启动：./kafka-server-start.sh ../config/server.properties &

查看topics列表：

 ./kafka-topics.sh --list --bootstrap-server 服务器ip:kafka端口

创建topics主题：

./kafka-topics.sh --create --bootstrap-server ip:端口 --replication-factor 1 --partitions 1 --topic topic_extract_hep主题名

获取主题内的消息内容：

./kafka-console-consumer.sh --bootstrap-server ip:kafka端口 --topic topic_extract_chd主题名 --from-beginning

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Starry Sky丨

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
kafka_2.13-3.2.3操作与使用

kafka_2.13-3.2.3基本操作与使用
复制链接

扫一扫

解决：“/****/kafka_2.13-3.0.0/bin/kafka-run-class.sh: line 342: exec: java: not found ”问题

一切有为法，如梦亦如幻，如露亦如电，应作如是观。

03-10

3855

问题：启动zookeeper失败，查看状态日志，如下图：解决 kafka运行依赖java环境，而本机已安装java环境查看java环境变量查看kafka环境变量回到问题本身，我们看一下kafka-run-class.sh脚本的342行内容：这里网上搜了很久，获悉kafka默认引用的java路径：/user/bin/java，这个与我们实际配置的java的环境变量$JAVA_HOME/bin路径不一致。这里，借鉴一下前辈的办法：修改java环境变量配置(.

Kafka3.2.3（KRaft）基于Linux的集群安装

yangkei

09-23

2055

Kafka3.2.3基于Linux的集群安装

参与评论您还未登录，请先登录后发表或查看评论

性能测试复习准备——linux环境下安装kafka_2.13-3.2.3.tgz

小白龙白龙马的博客

11-26

118

参考：https://www.bilibili.com/video/BV1Xy4y1G7zA?p=6&vd_source=79bbd5b76bfd74c2ef1501653cee29d6 解压到目录路径下：启动kafka之前，首先启动zk：修改配置文件：启动kafka和查看： ...

Kafka3.2.3 sasl配置

xiaoliuyue521的博客

11-07

226

Kafka sasl 安全认证配置。

Kafka2.13集群搭建

qq_35597828的博客

05-19

789

准备3台服务器，并配置hosts 172.17.0.2 node0 172.17.0.3 node1 172.17.0.4 node2 在其中一台服务器中搭建Zookeeper（单机或集群都可以） Zookeeper集群搭建参考链接下载Kafka wgethttps://mirrors.tuna.tsinghua.edu.cn/apache/kafka/3.2.0/kafka_2.13-3.2.0.tgz 解压压缩包 tar xf kafka_...

windows下kafka运行报错:consumer_offsets-22\00000000000000000000.index.swap:另一个程序正在使用此文件，进程无法访问。

Hello World

02-06

1627

原因 windows上的kafka不太稳定用一段时间后会出现这个问题。解决删除下列文件夹下的内容，但是文件夹别删除

kafka的安装与使用（一）

weixin_44334724的博客

05-20

616

kafka的安装与使用（一）最近接触消息中间件，把使用过程中记录一下！ 1. 下载与安装任何文档都要以官方文档为准，英文多看两眼你会发现比上次更加熟悉了。(*￣︶￣)！首先附上官方文档：[kafka官网](https://kafka.apache.org/documentation/#quickstart) 注意：kafka需要JDK1.8以上的版本，并且环境要配置好，不懂得可以去百度一个。windows和linux的java环境配置教程；下载kafka：本文是以【kafka_2.13-2

kafka3.3.2集群搭建

cangt的博客

06-07

412

添加 -Djava.security.auth.login.config=/opt/kafka/config/kafka_server_jaas.conf。KafkaClient这个名称不能变，保持大小严格。注意事项：kafka需要在zookeeper后面启动。配置中的username和password为。”不能少且位置不能变。中配置的user_开头的用户及对。重启验证所有配置是否正常。

linux kafka启动报错 /opt/kafka/bin/kafka-run-class.sh: line 342 No such file or directory 解决办法

Junyingjun的博客

12-25

1223

linux kafka启动报错 /opt/kafka/bin/kafka-run-class.sh: line 342: /usr/java/jdk1.8.0_332/bin/java: No such file or directory 解决办法

kafka_2.13-3.2.3.tgz

09-21

**Kafka概述** Kafka是由Apache软件基金会开发的一个开源流处理平台，最初由LinkedIn设计并贡献，后来成为了...在实际使用中，理解并掌握Kafka的核心概念和特性，能够帮助我们构建稳定、可靠的实时数据处理系统。

kafka_2.13-2.8.1.tgz

11-15

《深入理解Kafka：从kafka_2.13-2.8.1.tgz解压文件探索》 Apache Kafka是一款高性能、分布式的消息中间件，它最初由LinkedIn开发，后来成为Apache软件基金会的顶级项目。Kafka的核心特性包括高吞吐量、持久化、分区...

kafka_2.13-3.1.0

02-09

《Kafka 2.13-3.1.0：深度解析与应用实践》 Apache Kafka，一个由LinkedIn开发并贡献给Apache软件基金会的开源流处理平台，因其高性能、高可扩展性和容错性而备受业界青睐。Kafka 2.13-3.1.0是Kafka的一个重要版本...

最新版 kafka_2.13-2.7.0.tgz

12-23

6. 与Zookeeper的关系：随着Kafka的发展，社区正在逐渐减少对Zookeeper的依赖，2.7.0可能会进一步推动这一进程，引入更独立的集群协调机制。 7. 兼容性和稳定性：新版本通常会保持向后兼容，同时修复已知的bug，...

最新版kafka kafka_2.13-2.6.0.tgz

08-08

对于初次使用者，安装和配置Kafka 2.13-2.6.0版本，你需要解压“kafka_2.13-2.6.0”压缩包，然后按照官方文档的步骤进行操作，包括设置环境变量、启动Zookeeper、启动Kafka服务、创建主题、发布和消费消息等。...

kafka架构+原理+源码

JavaCoder_juejue的博客

07-21

1160

1.kafka架构图 2.kafka producer

Python 消费Kafka手动提交批量存入Elasticsearch

ytp552200ytp的博客

07-25

312

Python 消费Kafka手动提交批量存入Elasticsearch

方案-基于云架构的校园信息化建设方案.pdf

最新发布

07-29

方案-基于云架构的校园信息化建设方案.pdf

【创新未发表】Matlab实现蛇群优化算法SO-Kmean-Transformer-LSTM负荷预测算法研究.rar

07-29

1.版本：matlab2014/2019a/2021a 2.附赠案例数据可直接运行matlab程序。 3.代码特点：参数化编程、参数可方便更改、代码编程思路清晰、注释明细。 4.适用对象：计算机，电子信息工程、数学等专业的大学生课程设计、期末大作业和毕业设计。 5.作者介绍：某大厂资深算法工程师，从事Matlab算法仿真工作10年；擅长智能优化算法、神经网络预测、信号处理、元胞自动机等多种领域的算法仿真实验，更多仿真源码、数据集定制私信+。替换数据可以直接使用，注释清楚，适合新手

kafka_2.13-2.8.1安装

04-03

1. 下载Kafka 首先，打开Kafka官网：https://kafka.apache.org/downloads 选择最新的稳定版本，并下载对应的二进制文件。 2. 解压Kafka 将下载的Kafka压缩包解压到指定的目录下。这里以解压到/opt目录为例： ``` tar -zxvf kafka_2.13-2.8.1.tgz -C /opt ``` 3. 配置环境变量在.bashrc或者是.bash_profile文件中添加以下内容： ``` export KAFKA_HOME=/opt/kafka_2.13-2.8.1 export PATH=${PATH}:${KAFKA_HOME}/bin ``` 4. 启动Kafka 启动Zookeeper： ``` cd /opt/kafka_2.13-2.8.1 bin/zookeeper-server-start.sh config/zookeeper.properties ``` 启动Kafka： ``` cd /opt/kafka_2.13-2.8.1 bin/kafka-server-start.sh config/server.properties ``` 5. 创建Topic 创建一个名为test的Topic： ``` bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test ``` 6. 发送消息在控制台上发送一些消息： ``` bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test ``` 7. 接收消息在控制台上接收消息： ``` bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning ``` 至此，Kafka的安装和启动就完成了。