kafka消费者kafka-console-consumer接收不到数据

最新推荐文章于 2025-02-11 09:52:02 发布
原创 最新推荐文章于 2025-02-11 09:52:02 发布 · 2.8w 阅读 · 22 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

博客讲述了Kafka使用中，采用内置Zookeeper时发送端与接收端数据传输正常，但采用外置Zookeeper接收端无法接收数据的问题。给出解决办法，包括判断主题一致性、修改配置、删除或更换log.dirs文件地址、重新启动Kafka、创建生产者和消费者等。

发送端
在这里插入图片描述
接收端
在这里插入图片描述

问题
采用内置的zookeeper，发送端发送数据，接收端能够接收数据
但是采用外置的zookeeper，发送端发送数据，接收端一直接收不到数据
解决：
先判断主题是否一致，如果一致就在关闭kafka
./kafka-server-stop.sh ../config/server.properties
修改一下配置，确保这些配置已加上，不要用localhost，在listeners的ip地址和端口号要和消费者，生产者的的地址端口号一直
vim ../config/server.propertiesst3
在这里插入图片描述
在这里插入图片描述
最后把log.dirs后面的文件删除或者重新换个地址
rm -rf /tmp/kafka
在这里插入图片描述
重新在前台启动kafka，注意查看打印在桌面的日志，有无报错信息
./kafka-server-start.sh ../config/server.properties
如果没有报错信息，启动正常，那么就可以在后台启动了
./kafka-server-start.sh -daemon ../config/server.properties
创建生产者
./kafka-console-producer.sh --broker-list 172.16.193.175:9092 --topic test3
创建消费者
./kafka-console-consumer.sh --bootstrap-server 172.16.193.175:9092 --topic test3 --from-beginning

Kafka 客户端、控制台和 Flink 无法消费数据的解决方案
2301_79366435的博客
09-17 682
确保将 “your_bootstrap_servers” 替换为实际的 Kafka 服务器地址，“your_consumer_group” 替换为您的消费者组，“your_topic” 替换为您要消费的主题。确保将 “your_bootstrap_servers” 替换为实际的 Kafka 服务器地址，“your_consumer_group” 替换为您的消费者组，“your_topic” 替换为您要消费的主题。例如，如果您的生产者发送的是字符串消息，则消费者的反序列化器也应该是字符串反序列化器。
【Kafka】kafka命令kafka-console-consumer.sh
九师兄
12-13 5749
1.概述 kafka-console-consumer.sh 脚本是一个简易的消费者控制台。该 shell 脚本的功能通过调用 kafka.tools 包下的 ConsoleConsumer 类，并将提供的命令行参数全部传给该类实现。 注意：Kafka 从 2.2 版本开始将 kafka-topic.sh 脚本中的 −−zookeeper 参数标注为 “过时”，推荐使用 −−bootstrap-server 参数。若读者依旧使用的是 2.1 及以下版本，请将下述的 --bootstrap-server .
kafka自定义分区器无法接收到数据
weixin_46231937的博客
04-04 2034
大无语记录
[kafka] 消费没有数据的问题解决Group coordinator lookup failed: The coordinator is not available
07-07 2975
[kafka] 消费没有数据的问题解决Group coordinator lookup failed: The coordinator is not available
Kafka消费不到数据/消费者没有反应
热门推荐
hxc2101的博客
03-06 1万+
问题引言： 在测试kafka最简单的这个案例时，发现消费者端接收不到数据，完全没有反应 bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning 解决方式 进入zookeeper客户端，将brokers节点下的topics节点
kafka踩坑 -消费者接收不到数据
yiyuanyu的博客
06-24 8126
问题：项目中用到kafka作为消息中间件，因为现在是开发阶段，试了一次没问题之后就没在管，今天又要测试kafka相关功能，发现消息发送者能够正常发送消息，但是消费者怎么也就收不到数据。然后经过各种百度进行了如下的一系列操作，终于可用了 1.首先停止kafka 进入到kafka的bin目录下，停止kafka： ./kafka-server-stop.sh …/config/server.properties 2. 查看server.properties命令，看logdir的目录，换个目录或者删除目录中的数据
kafka的kafka-console-consumer.sh和kafka-console-producer.sh如何使用
weixin_43940494的博客
02-11 830
本文聚焦于 Kafka 的 kafka - console - consumer.sh 和 kafka - consumer - perf - test.sh 两款消费者工具。先对比其功能用途、参数设置与输出结果，前者用于简单消息消费查看，参数简洁、输出消息内容；后者专注性能测试，参数丰富、输出性能指标。接着阐述使用 SCRAM - ACL 认证连接 Kafka 集群的方法，包括集群端开启认证、创建用户与配置密码、设置 ACL 策略，以及两款工具在连接时的具体配置
kafka-console-consumer:Kafka控制台使用者-从时间戳读取事件
03-30
Kafka游戏机消费者 控制台应用程序，用于从给定的时间戳读取事件。 要求 Java> = 8 建造 ./mvn install 用法示例 配置 您需要在与工具配置相同目录中的application.properties文件中进行特定设置，才能与kafka连接...
kafka-console-consumer.sh和kafka-consumer.sh有什么区别
weixin_46356409的博客
08-02 1152
用于从Kafka Topic中消费消息并将其输出到控制台，适用于调试和测试。：用于运行自定义的消费者应用程序，适用于实现复杂的消费逻辑。在大多数情况下，如果你只是想快速查看Kafka Topic中的消息内容，是更方便的选择。如果你需要运行一个自定义的消费者应用程序，则是更合适的工具。和是Kafka中两个不同的命令行工具，它们的用途和功能有所不同。以下是它们的主要区别：这条命令用于使用Kafka的命令行工具来消费一个名为eve的Topic中的消息。这条命令使用工具从名为eve。
kafka使用kafka-console-consumer.sh和kafka-console-producer.sh生产消费数据样例
microGP的专栏
06-12 7205
kafka-console-producer.sh生产无key消息 进入到kafka的bin目录下：执行以下脚本： ./kafka-console-producer.sh --broker-list List<host:port> --topic topicName 在下面的console中输入value后点击enter键即完成数据的生产 kafka-console-producer.sh生产有key消息 进入到kafka的bin目录下：执行以下脚本： ./kafka-conso
Kafka消费不到数据
wildding的博客
05-16 4219
方法1：登录bin/zkCli.sh 然后删除kafka中/brokers/topics/__consumer_offsets 节点。看logdir的目录，换个目录或者删除目录中的数据，本机是 rm -rf datas/* (方法2：停止zookeeper： zk.sh stop 查看conf/zoo.cfg的。：zookeeper报错日志可以在 logs里xxxx.out中查看)：kafka报错日志可以在 logs里 server.log查看)1.首先停止kafka： kafka.sh stop。
kafka接受不到数据
ztx22555的博客
08-17 4912
kafka接受不到数据
kafka-console-consumer接收不到flume推送过来的消息
dengmanzhou3124的博客
08-04 726
原因和解决方法：需要先启动kafka，再启动flume，两者启动有先后顺序。 转载于:https://www.cnblogs.com/mediocreWorld/p/11297450.html
[Kafka错误]------使用Kafka的kafka-console-consumer.sh不能消费消息
每天进步一点点
03-20 1万+
1.前言 使用Ambari搭建的kafka集群，在使用kafka-console-producer.sh的时候，指定--broker-list的值需要从server.properties中查看listeners=PLAINTEXT://的值。同理，使用kafka-console-consumer.sh的时候，指定--bootstrap-server也需要从server.properties中查看......
kafka接收不到数据
weixin_43472847的博客
12-21 2114
kafka接收不到数据 一直都没有写博客，老是索取，没有回报，从今天开始记录每天碰到的问题。
java连接kafka接收不到数据_Kafka客户端无法接收消息
weixin_36278982的博客
02-27 1711
我在远程机器上设置了kafka和zookeeper . 在那台机器上我可以看到下面在官方网站上使用测试方法 .> bin/kafka-console-producer.sh --broker-list localhost:9092 --topic listings-incomingThis is a messageThis is another message> bin/kafka-c...
kafka消费不到数据问题
qq_42315376的博客
02-27 9118
kafka消费者不能正常消费的原因与解决方法
python调用kafka_在python-flask中调用kafka发送消息，消费者收不到
weixin_39694838的博客
11-26 1595
首先，在没有flask的时候，我写了kafka的程序，一个生产者，一个消费者。生产者进程，它负责读取本地的一张图片，把图片的二进制数据以消息的形式发送给kafka，代码如下：from kafka import KafkaProducer# get the binary data of a picturef=open('/home/seven/Pictures/fff.png','rb')data=...
springboot——ActiveMQ
WannaRunning的博客
11-22 436
JMS中有两种消息模型：一种是点对点（point to point， queue），另一种是发布/订阅（publish/subscribe，topic）。 通俗地讲，这两者之间的别就是一条消息被发布后是否能被消费者重复消费。 点对点：Queue 生产者生产一条消息发送到queue中，某个在坚挺的消费者从queue中取出，消费消息，并告知MQ服务这条消息被消费了，queue中不再有存储，至此...
如何使用kafka-console-consumer
最新发布
07-10
虽然 `kafka-console-consumer.sh` 主要用于简单的消息消费和调试，但也可以结合其他工具（如 `kafka-consumer-perf-test.sh`）来进行性能测试。这些工具可以帮助评估消费者的吞吐量、延迟等性能指标，进而为优化...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值