【问题】kafka.common.KafkaException: fetching topic metadata for topics

最新推荐文章于 2023-04-24 12:39:50 发布
最新推荐文章于 2023-04-24 12:39:50 发布
阅读量1.9k 收藏
点赞数
文章标签： 大数据
原文链接：https://yq.aliyun.com/articles/515350
版权

der for Set

Flume部署在本地，Kafka集群部署在AWS云上。

解决办法

Consume端服务器配置/etc/hosts文件，其中机器名从要同Kafka服务端私有DNS名称相同（这个名称可以在报错信息中看到）

123.123.123.123 ip-192-168-110-4.cn-north-1.compute.internal



     本文转自巧克力黒 51CTO博客，原文链接：http://blog.51cto.com/10120275/1865792，如需转载请自行联系原作者

weixin_33921089
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Kafka的Producer报错：Fetching topic metadata with correlation id 0 for topics
u013933879的博客
08-09 1万+
问题 在向Kafka生产消息时，报错：Fetching topic metadata with correlation id 0 for topics [Set(game-etl-finished-topic)] from broker [id:0,host:192.168.90.83,port:9093] failed 排查过程 出现问题之前做了一个操作：中断了一次消费程序后再生产数据...
Flink无法获取Kafka Topic Metadata异常及解决.docx
09-20
Flink无法获取Kafka Topic Metadata异常及解决.docx
【storm kafka】RROR fetching topic metadata for topics [Set(order)] from broker [ArrayBuffer(id:0,host
七夜之家
04-20 8144
错误信息如下： 3864318 96724 141 92 0 2014-09-13 7529584 79828 729 31 0 2014-09-13 9052481 95904 236 19 1 2014-09-13 4498600 37499 515 64 0 2014-09-13 1684086 71814 646 8 -1 2014-09-13 9246
Kafka异常
阿达丶
11-07 1337
单机版kafka测试 producer发送消息异常如下： （1）ERROR fetching topic metadata for topics kafka.common.KafkaException: Fetching topic metadata with correlation id 0 for topics [Set(test)] （2） ERROR Failed to ...
30个Kafka常见错误小集合
东城庞太师
08-06 1万+
本文是一个Kafka使用过程中的常见错误的总结。希望对你有帮助。 1、UnknownTopicOrPartitionException org.apache.kafka.common.errors.UnknownTopicOrPartitionException: This server does not host this topic-partition 报错内容：分区数据不在 原因分析：producer向不存在的topic发送消息，用户可以检查topic是否存在 或者设置auto.creat
kafka集群发送消息报错
zlhblogs的博客
04-24 457
host是localhost，而我的kafka集群是slave4、5上，zk在master，slave2、3上，所以分别修改 slave4、5 上的server.properties的 host.name=slave4， host.name=slave5。因为logstash采集的日志要发往kafka做一个队列机制，搭建完kafka集群后发送消息出现问题。0上的host变成了slave4。重新启动kafka，查看zk。在发送消息成功，接收消息成功。强制关闭 selinux。发送消息还是报一样的错。
kafka处理超大消息的配置 org.apache.kafka.common.errors.RecordTooLargeException
01-07
java.lang.RuntimeException: java.util.concurrent.ExecutionException: org.apache.kafka.common.errors.RecordTooLargeException: The request included a message larger than the max message size the server ...
kafka-manager最新编译版1.3.3.22，解决了异常Unknown offset schema version 3
04-17
这个问题通常出现在消费者尝试读取Kafka中的偏移量时，由于版本不匹配导致的。Kafka-Manager是Yelp开源的一款针对Kafka集群管理的工具，最新版本1.3.3.22已经对这一异常进行了修复，使得管理和监控Kafka集群变得更加...
kafka.clj：Kafka的Clojure客户端
01-31
**Kafka的Clojure客户端——kafka.clj** 在分布式系统和实时数据处理领域，Apache Kafka已经成为一个不可或缺的组件。它作为一个高吞吐量、低延迟的消息中间件，被广泛用于构建实时数据管道和流应用。而`kafka.clj`...
kafka.tar.gz
04-19
kafka的Dockerfile镜像的构建 1. jdk-8u102-linux-x64.tar.gz 2. kafka_2.11-2.4.0.tgz 配合脚本进行自动化的构建
Kafka常见错误及解决办法
yiweiyi329的博客
09-24 4万+
1、报错信息： org.apache.kafka.clients.consumer.OffsetOutOfRangeException: Offsets out of range with no configured reset policy for partitions: {qukan_log_v3-198=2289560518} 报错原因：当消费者消费offset大于或小于当前kafka集...
Linux下搭建kafka遇到的两个问题
qq_27707957的博客
05-19 2231
1.删除topic问题 在kafka的安装目录的bin目录下，执行命令 ./kafka-topics.sh --zookeeper localhost:2181 --delete --topic test test为之前创建的topic。 控制台打印出，如果delete.topic.enable未设置为true，则不会产生任何影响。 我们执行如下命令 ./kafka-topics....
SparkStream+kafka报错Fetching topic metadata with correlation id 0 for topics from broker
zhaoguowei的博客
10-22 1479
19/10/22 17:35:44 WARN ClientUtils$: Fetching topic metadata with correlation id 0 for topics [Set(zhaogw)] from broker [id:0,host:dblab-VirtualBox,port:9092] failed java.nio.channels.ClosedChannelEx...
Kafka系列2-producer和consumer报错
kuluzs
06-03 6万+
1. 使用127.0.0.1启动生产和消费进程： 1）启动生产者进程： bin/kafka-console-producer.sh --broker-list 127.0.0.1:9092 --topic test 输入消息： this is msg 生产者进程报错： [2016-06-03 11:33:47,934] WARN Bootstrap brok
启动kafka无反应_kafka 生产发送消息失败无响应，或者Error while fetching metadata with correlation id...
weixin_35663032的博客
12-23 3258
今天在使用代码编写kafka 生产者发送消息的时候，因为我的手误出现的搞笑的事情。同样的代码和kafka 在不久前执行过，是没有问题的。 代码如下package streaming.utilsimport java.utilimport java.util.{Date, Properties, UUID}import com.alibaba.fastjson.JSONObjectimport or...
报错处理——org.apache.kafka.common.errors.TimeoutException: Timeout expired while fetching topic metadata
龍承leo
03-13 7809
具体报错如下： ckpoints to JobManager) (checkpoints: 'hdfs://craw-node212:9000/flink-checkpoints', savepoints: 'null', asynchronous: TRUE, maxStateSize: 5242880) 2022-03-13 22:48:00.641 [Process (3/4)] INFO org.apache.flink.runtime.taskmanager.Task - Loading J
error[No partition metadata for topic test-1 due to kafka.common.LeaderNotAvailableException]
luyee2010的专栏
11-06 1万+
http://stackoverflow.com/questions/23228222/running-into-leadernotavailableexception-when-using-kafka-0-8-1-with-zookeeper-3 Kafka uses an external coordination framework (by default Zookeeper) t
kafka问题解决：org.apache.kafka.common.errors.TimeoutException
热门推荐
maoyuanming0806的博客
06-03 21万+
记录使用kafka遇到的问题： - 1.Caused by java.nio.channels.UnresolvedAddressException null - 2.org.apache.kafka.common.errors.TimeoutException: Expiring 1 record(s) for t2-0: 30042 ms has passed since b...
Linux安装kafka 分布式
成哥万岁
06-16 8999
下载kafka，地址：http://kafka.apache.org/downloads.html选择Binary downloads下载 上传到linux并解压 $ tar -zxvf kafka_2.11-0.8.2.1.tgz   修改server.properties文件 $ vi config/server.properties broker.id=1 (每台机器不能一
org.apache.kafka.common.KafkaException: Failed to construct kafka producer
最新发布
07-27
这个异常通常表示在构建 Kafka 生产者时出现了错误。有几个可能的原因导致此异常： 1. Kafka 服务器不可用：请确保 Kafka 服务器正在运行，并且您的代码能够连接到正确的 Kafka 服务器地址和端口。 2. 配置错误：检查您的 Kafka 生产者配置是否正确。确保您提供了正确的 bootstrap.servers、key.serializer 和 value.serializer 等必要配置属性。 3. 依赖问题：请确保您的项目中包含了正确版本的 Kafka 客户端库。检查您的构建文件（如 Maven 的 pom.xml）或其他构建工具配置，确保指定了正确的 Kafka 客户端依赖。 4. 认证问题：如果您的 Kafka 服务器启用了身份验证机制（如 SSL 或 SASL），请确保您的代码提供了正确的身份验证配置，包括证书、密钥和密码等。 如果您能提供更多的错误日志或代码片段，我可以更详细地帮助您解决这个问题。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值