【Kafka】Failed to send data to Kafka: Failed to update metadata after 60000 ms

已于 2023-11-01 17:22:10 修改
阅读量2.7k 收藏
点赞数
分类专栏： 大数据-kafka 文章标签： kafka zookeeper 分布式
于 2020-07-03 19:22:26 首次发布
本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。
本文链接：https://blog.csdn.net/qq_21383435/article/details/105632597
版权

文章目录

1.美图

在这里插入图片描述

2.背景

java.lang.Exception: Failed to send data to Kafka: Failed to update metadata after 60000 ms.
        at org.apache.flink.streaming.connectors.kafka.FlinkKafkaProducerBase.checkErroneous(FlinkKafkaProducerBase.java:376)
        at org.apache.flink.streaming.connectors.kafka.FlinkKafkaProducer010.invoke(FlinkKafkaProducer010.java:352)
        at org.apache.flink.streaming.api.operators.StreamSink.processElement(StreamSink.java:56)
        at org.apache.flink.streaming.runtime.io.StreamOneInputP
了解本专栏 订阅专栏 解锁全文
九师兄
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
kafka 解决log4j:ERROR Failed to rename错误解决办法错误的jar包
10-31
log4j:ERROR Failed to rename
kafaka整合springboot 错误：Failed to update metadata after 60000 ms.
A1229451567的博客
11-23 1万+
org.apache.kafka.common.errors.TimeoutException: Failed to update metadata after 60000 ms. 这个问题困扰了我一个下午，总结一下有以下几点原因: 1.未开启kafka服务 2.未配置kafka的server.properties文件 listeners=PLAINTEXT://{内网ip}:9092 ...
canal Failed to update metadata after 60000 ms 等问题解决
LZX的博客
02-08 6571
Failed to update metadata after 60000 ms com.alibaba.fastsql.sql.parser.ParserException: syntax error, error in : 'cur ; UNKNOWN_TOPIC_OR_PARTITION INVALID_TOPIC_EXCE
关于org.apache.kafka.common.errors.TimeoutException: Failed to update metadata after 60000 ms.问题的解决
热门推荐
weixin_42558056的博客
08-07 2万+
关于org.apache.kafka.common.errors.TimeoutException: Failed to update metadata after 60000 ms.问题的解决 今天在测试自己编写的kafka消息发送接收小例子时，一直报org.apache.kafka.common.errors.TimeoutException: Failed to update metadat...
canal无法往kafka同步，报错TimeoutException: Failed to update metadata after 60000 ms
雅冰石的专栏
03-23 4651
一 问题描述 canal往kafka同步报错，数据无法同步。 canal instance报错：ERROR com.alibaba.otter.canal.kafka.CanalKafkaProducer - java.util.concurrent.ExecutionException: org.apache.kafka.common.errors.TimeoutException: Failed to update metadata after 60000 ms canal server也有报错：
Kafka报错org.apache.kafka.common.errors.TimeoutException: Failed to update metadata after 60000 ms.
球球的博客
10-21 8510
问题描述 kafka producer/consumer连接kafka broker超时，报错日志： org.apache.kafka.common.errors.TimeoutException: Failed to update metadata after 60000 ms. 解决办法 假如：kafka broker部署在172.17.162.198（主机名为myhost01）机器。...
kafka.errors.KafkaTimeoutError: KafkaTimeoutError: Failed to update metadata after 60.0 secs.
nageaixiaodenanhai的博客
04-05 1万+
连接超时 修改kafka的 config/server.properties文件中： advertised.listeners=PLAINTEXT://IP地址:9092 重启kafka服务
kafka_to_hbase（通过设计模式，一般main方法）
06-01
标题中的“kafka_to_hbase”指的是一个数据处理流程，从Apache Kafka到Apache HBase的实时数据迁移。Kafka是一个高吞吐量的分布式消息系统，常用于实时数据流处理，而HBase则是一个分布式的、面向列的NoSQL数据库，...
Introduction to Apache Kafka.pdf
最新发布
07-02
kafka
kafka to redis
08-22
kafka to redis2
kafka生产者报错Failed to update metadata after 60000 ms.
CodersCoder的博客
12-16 1万+
背景 由于新增一个对接渠道，系统要对Kafka的消息进行消费，由于对接方目前没有环境，所以自己本地开发，并且使用环境中的一台kafka作为开发使用，本地自己设置producer和consumer，分别作为生产者和消费者。 producer consumer 问题 同样的topic和groupid，但是在使用的过程中，在producer提供消息的时候，出现了Failed to update metadata after 60000 ms. 网上搜索多数都是要求更改kafka的配置文件中的信息，但是此kaf
Arguments: (KafkaTimeoutError(‘Failed to update metadata after 60.0 secs.‘),)
Cheny的博客
03-04 729
python上传kafka失败
Kafka系列之：NoBrokersAvailable和Failed to update metadata after 60.0 secs.
zhengzaifeidelushang的博客
07-01 1916
kafka.errors.NoBrokersAvailable: NoBrokersAvailable KafkaTimeoutError: Failed to update metadata after 60.0 secs.
kafka连接异常org.apache.kafka.common.errors.TimeoutException: Failed to update metadata after 60000 ms.
七星程序员的博客
12-24 1万+
前言：网上很多说是hosts的问题，我经过测试发现不是，经过我自己测试，介绍三种针对大部分问题的解决方法 1.未开放防火墙端口或关闭防火墙 防火墙一般本地测试才会关闭，线上一般都是开启的，建议还是添加端口 添加端口： # --permanent 为永久添加，不指定此参数重启后失效 firewall-cmd --zone=public --add-port=9092/tcp --permanent ...
【python kafka-python】报错如下：KafkaTimeoutError: Failed to update metadata after 60.0 secs.
赖德发的博客
04-27 8639
python-kafka KafkaTimeoutError连接不上kafka 问题分析： 当代码解析时，会把kafka的地址解析成在zookeeper中设置的kafka名称。所以，需要配置对应名称到相应ip的etc/hosts映射。 解决办法： vim /etc/hosts 加入别名和ip 映射 20.0.28.14 kafka1 20.0.28.15 kafka2 20.0.28.16 kafka3 wq! 保持即可。 然后使用kafka1 别名 作为kafka host kfk_host="kaf.
kafka failed to update metadata after 60000ms
likeChocolates的博客
12-27 1万+
kafka更新不到元数据会自动断开，查找producer日志是否报Uncaught error in kafka producer I/O thread sender线程是否正常 ，在接着排查异常处理
Failed to send data to Kafka
malove110的博客
12-16 1622
kafka 异常
Failed to update metadata after 60000 ms.
02-28
"Failed to update metadata after 60000 ms" 是一个错误消息，通常在使用 Apache Kafka 进行数据传输时出现。这个错误表示 Kafka 客户端在指定的时间内无法更新元数据信息。 元数据是 Kafka 集群中关于主题、分区和副本等信息的描述。当 Kafka 客户端需要连接到集群并发送或接收消息时，它需要获取最新的元数据信息。如果在指定的时间内无法更新元数据，就会出现这个错误。 这个错误可能有以下几个原因： 1. 网络问题：客户端无法与 Kafka 集群建立连接，可能是由于网络故障、防火墙配置或者集群不可用导致的。 2. 集群问题：Kafka 集群可能正在进行重分区、副本分配或者其他维护操作，导致元数据更新失败。 3. 客户端配置问题：客户端的配置可能不正确，比如指定了错误的集群地址、端口或者其他参数。 解决这个问题的方法包括： 1. 检查网络连接：确保客户端能够正常连接到 Kafka 集群，并且网络稳定。 2. 检查集群状态：确认 Kafka 集群正常运行，并且没有正在进行的维护操作。 3. 检查客户端配置：仔细检查客户端的配置文件，确保配置正确。 4. 增加超时时间：可以尝试增加更新元数据的超时时间，以便给集群足够的时间来响应。 5. 调整 Kafka 集群的配置：如果问题持续存在，可能需要调整 Kafka 集群的配置，比如增加副本数、调整分区分配策略等。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九师兄

你的鼓励是我做大写作的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值