kafka-consumer-groups.sh error :Failed to find brokers to send ListGroups

最新推荐文章于 2023-06-26 15:14:06 发布
最新推荐文章于 2023-06-26 15:14:06 发布
阅读量4.2k 收藏
点赞数
分类专栏： 大数据 文章标签： kafka java 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/mdming412/article/details/128691597
版权

查看kafka消费组时报错

问题描述

执行kafka 脚本 ,

kafka-consumer-groups.sh --bootstrap-server controller-server-host:9092 --list

无法看查看消费组，以下是error info:

org.apache.kafka.common.errors.DisconnectException: Cancelled
fetchMetadata request with correlation id 71 due to node -3 being
disconnected

Error: Executing consumer group command failed due to
org.apache.kafka.common.KafkaException: Failed to find brokers to send
ListGroups java.util.concurrent.ExecutionException:
org.apache.kafka.common.KafkaException: Failed to find brokers to send
ListGroups
at org.apache.kafka.common.internals.KafkaFutureImpl.wrapAndThrow(KafkaFutureImpl.java:45)
at org.apache.kafka.common.inter

解决

vi consume-group-ssl.properties

security.protocol=SASL_PLAINTEXT
sasl.mechanism=GSSAPI
sasl.kerberos.service.name=kafka

在kafka-consumer-groups.sh 脚本运行时，添加参数： --command-config …/config/client-ssl.properties， 即可。

鸣一
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【kafka】查看消费组报错 Executing consumer group command failed due to Request METADATA failed on brokers Lis
九师兄
06-05 8196
kafka查看消费组报错 cc@lcc bin$ /Users/lcc/soft/kafka/kafka_2.11-1.1.0/bin/kafka-consumer-groups.sh --new-consumer --bootstrap-server localhost:2181,localhost:2182,localhost:2183 --list The [new-consumer] ...
kafka集群报错找不到broker
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
06-09 2584
现场测试验证，报错：报错：Failed to find brokers to send ListGroups……某次用户反馈，kafka消费这边消息失败，报错消费者被踢出消费组或broker状态异常无法连接，后实际验证端口确实不通。如上所示，缺失找不到broker node，查看发现多了一个意外节点，经确认为非正常配置。发现topic的授权用户和consumer.properties里配置的消费用户名不一致。broker 4 （172.18.1.198）------>下线该节点。如上图所示，没有组权限；
rails应用无法读取kafka数据报错Kafka::Error: Failed to find group coordinator
weixin_30912051的博客
01-10 338
如果确保kafka中有数据，rails应用中却无法读取到，或报如下错误： Kafka::Error: Failed to find group coordinator 一般有两种情况，解决： 1.应用服务器如果不在集群里面。要把集群的host加到应用机。 vi /etc/hosts xx.xx.xx.xx nodename 2.ruby-kafka版本不支持 ...
kafka启用SASL认证后使用kafka-consumer-groups.sh查看消费组报错的问题
最新发布
shanger_1216的博客
06-26 1929
/bin/kafka-consumer-groups.sh --describe --bootstrap-server kafka的IP:kafka的端口--command-config config/consumer-group-ssl.properties --group test-group。解决SASL认证类型kafka在使用kafka-consumer-groups.sh查看消费组数据时，报以下异常的问题。保存配置文件consumer-group-ssl.properties。
Caused by: org.apache.kafka.common.KafkaException: Failed to construct kafka consumer
weixin_36585549的博客
11-03 7575
遇到的问题 kafka使用kerberos安全认证后，我这边的消费程序需要修改。原本如果是普通的消费程序，加两行代码就行了： System.setProperty("java.security.auth.login.config", kafkaJaasPath); System.setProperty("java.security.krb5.conf", krb5Path); 但是我的程序是用spark streaming框架写的。原本在我的idea上跑local跑的好好的，结果一上到spark st
kafka.common.KafkaException: Failed to parse the broker info from zookeeper: {"listener_security_pro
W
04-13 1079
报错详情 kafka.common.KafkaException: Failed to parse the broker info from zookeeper: {"listener_security_protocol_map":{"PLAINTEXT":"PLAINTEXT"},"endpoints":["PLAINTEXT://master:9092"],"jmx_port":-1,"hos...
kafka-schema-registry-client-6.2.2.jar
04-25
Could not resolve dependencies for project org.apache.flink:flink-avro-confluent-registry:jar:1.15.3: Could not find artifact io.confluent:kafka-schema-registry-client:jar:6.2.2 in maven 安装本地...
kafka-eagle-bin-2.1.0.tar.gz
07-05
4. 启动：执行`bin/kafka-eagle-start.sh`启动服务，使用`bin/kafka-eagle-stop.sh`停止服务。 5. 访问：在Web浏览器中输入`http://服务器IP:端口`，按照提示进行登录和操作。 ### 使用注意事项 1. 确保运行环境已...
pentaho-kafka-consumer.zip
03-16
在标题"pentaho-kafka-consumer.zip"中，我们看到的是一个专门为Pentaho Kettle定制的Kafka消费者插件的压缩包。 这个压缩包的描述提到了如何在Pentaho环境中安装和使用这个插件。首先，你需要在你的Pentaho Kettle...
kafka-schema-registry-client-3.2.0.jar
12-11
kafka-schema-registry-client-3.2.0.jar包，亲测可用，在aliyun仓库内找不到，可以下载此jar包来进行手动安装
KAFKA-3.1.1-1.3.1.1.p0.2-el7.parcel
08-15
标题中的“KAFKA-3.1.1-1.3.1.1.p0.2-el7.parcel”指的是Apache Kafka的一个特定版本的软件包，适用于Red Hat Enterprise Linux 7（RHEL 7）系统。这个版本是3.1.1，并且可能是某个特定发行版或修补版的1.3.1.1.p0.2...
Kafka消费组无法消费问题排查实战
中间件兴趣圈
08-24 8593
kafka集群能发送消息，但无法消费消息，这如何是好呢？
查看Kafka集群下所有的topic报错“Timed out waiting for a node assignment. Call: listTopics“
二木成林
05-15 1万+
异常 [root@centos7_101 kafka]# bin/kafka-topics.sh --bootstrap-server 192.168.88.142:9092 --list \^HError while executing topic command : Timed out waiting for a node assignment. Call: listTopics [2022-04-10 15:13:13,560] ERROR org.apache.kafka.common.errors
spark包链接kafka集群报错org.apache.kafka.common.KafkaException: Failed to construct kafka consumer
AnNanDu的博客
04-26 4466
1、如果是spark执行的包请到spark下面的jars文件夹里检索是否拥有相关的jar包 可以看到我这里是有的，那就不是jar包的问题 2、确认是不是版本问题，在自己的本地测试里看一下maven的包 我这边版本是一致的，所以也不是版本问题，那是什么原因造成创建消费失败的呢 3、kafka的链接 可以看到kafka是用了集群的，三个链接是配置了hosts的，我们看一下我们运行...
Kafka执行脚本创建topic报错：ERROR org.apache.kafka.common.errors.InvalidReplicationFactorException: Replicati
wufabao的博客
02-09 1万+
问题： 在代码中测试SparkStreaming与Kafka整合的过程，需要在kafka中提前创建两个topic，但是在执行创建脚本的过程中报错如下 kafka-topics.sh --zookeeper linux1:2181,linux2:2181,linux3:2181 --create --topic wufabao_topic01 --replication-factor 2 --partitions 3 WARNING: Due to limitations in metric names,
jaas权限认证的剖析
Tu_maimes
09-11 178
原文转载
【Kafka】测试集群中Broker故障对客户端的影响
浩瀚宇宙的一粒尘埃
12-18 8826
本文主要测试Partition的Leader所在Broker节点故障之后，对客户端的影响。 测试信息： Topic信息：3个副本，3个分区； Producer：多线程，100条/秒、10条/秒； Consumer：不间断poll消息； 测试客户端：原生的KafkaConsumer/KafkaProducer、Spring的KafkaTemplete； 测试场景：Producer和Consumer运行过程中，通过K8Sdashboard删除Partition所在Leader对应的Pod； 测试.
Caused by: org.apache.kafka.common.KafkaException: org.codehaus.jackson.map.deser.std.StringDeserial
weixin_44100470的博客
03-12 1657
Springboot搭建kafka和spark出现的Bug总览 Caused by: org.apache.kafka.common.KafkaException: org.codehaus.jackson.map.deser.std.StringDeserializer is not an instance of org.apache.kafka.common.serialization.Deserializer org.codehaus.jackson.map.deser.std.StringDeser
Flink消费Kafka错误：org.apache.kafka.common.KafkaException: Failed to construct kafka consumer
热门推荐
xiaozhaoshigedasb的博客
05-09 1万+
org.apache.kafka.common.KafkaException: Failed to construct kafka consumer at org.apache.kafka.clients.consumer.KafkaConsumer.<init>(KafkaConsumer.java:717) at org.apache.kafka.clients.consume...
如何使用kafka-consumer-groups.sh
04-24
Kafka-consumer-groups.sh 是一个用于管理 Kafka 消费者组的命令行工具。你可以使用它来列出或重置消费者组的偏移量、查看当前偏移量的状态以及获取消费者组的信息。 要使用kafka-consumer-groups.sh，首先需要确保Kafka已经安装并运行。然后，打开终端窗口，并使用以下命令： ./kafka-consumer-groups.sh [options] 其中，options部分包含一系列选项，可用于定义特定的操作。例如，如果要列出消费者组的成员，可以使用以下命令： ./kafka-consumer-groups.sh --list --bootstrap-server localhost:9092 上述命令将列出指定启动服务器的所有消费者组。 如果要查看消费者组中每个成员的当前偏移量，请使用以下命令： ./kafka-consumer-groups.sh --describe --group test-consumer-group --bootstrap-server localhost:9092 上述命令将显示“test-consumer-group”消费者组中每个成员的当前偏移量，以及它们正在消费的主题和分区。 如果要重置消费者组的偏移量，可以使用以下命令： ./kafka-consumer-groups.sh --reset-offsets --group test-consumer-group --to-latest --execute --bootstrap-server localhost:9092 上述命令将重置“test-consumer-group”消费者组的偏移量，以便从最新可用的消息开始消费。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值