go 链接kafka报错解决

jj吉吉国王

已于 2023-04-23 16:35:29 修改

阅读量9.4k

点赞数

分类专栏： Go相关 gopacket kafka 文章标签： kafka 分布式

于 2019-09-23 14:50:26 首次发布

本文链接：https://blog.csdn.net/qq_27333977/article/details/101205495

版权

Go相关同时被 3 个专栏收录

4 篇文章 0 订阅

订阅专栏

gopacket

4 篇文章 0 订阅

订阅专栏

kafka

1 篇文章 0 订阅

订阅专栏

报错错误：

producer close, err: kafka: client has run out of available brokers to talk to (Is your cluster reachable?)

原因端口未对外开放；

Centos 开启所有端口对外

systemctl stop firewalld.service

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

jj吉吉国王

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

Debezium从入门到精通系列之：百篇系列文章汇总之研究Debezium技术遇到的各种错误的解决方法

zhengzaifeidelushang的博客

07-30

2027

Debezium从入门到精通系列之：打通Debezium技术过程中遇到各种错误的解决方法之百篇系列文章汇总

【解决方案】kafka: client has run out of available brokers to talk to (Is your cluster reachable?)

控制工程博1，研究方向：飞行器控制、制导、机器人控制

05-25

1万+

终端中报错kafka: client has run out of available brokers to talk to (Is your cluster reachable?) 同时Kafka启动时报错: Opening socket connection to server localhost/127.0.0.1:2181. Will not attempt to authenticate using SASL (unknown error) 解决方法：检查自己的zookeeper和

1 条评论您还未登录，请先登录后发表或查看评论

Golang连接kafka报错: Errorkafka: client has run out of available brokers to talk to

Addroc_Sue的博客

10-31

7008

go连接kafka问题报错: panic: Error creating consumer group client: kafka: client has run out of available brokers to talk to: 3 errors occurred:

go连接Kafka报错kafka: client has run out of available brokers to talk to

雪峰流云

01-21

1万+

问题出现的场景：有个go写的项目，原来是用go vendor来管理依赖包的，现在改为是用go module方式了，转换之后，编译成功，发现了上面的错误。很显然连接kafka集群报错了。问题的原因：网上搜了下，很多说是防火墙啥的问题，其实不是。本质原因是，我项目使用的如下kafka客户端库 github.com/Shopify/sarama 版本升级到当前最新版，这个最新版无法连接kafka集群，换为原来的旧版本就没有问题。大家不要被报错内容迷惑，跟客户端多少没有关系的。特此记录一下，以作

Kafka常见错误及解决办法

热门推荐

yiweiyi329的博客

09-24

4万+

1、报错信息： org.apache.kafka.clients.consumer.OffsetOutOfRangeException: Offsets out of range with no configured reset policy for partitions: {qukan_log_v3-198=2289560518} 报错原因：当消费者消费offset大于或小于当前kafka集...

kafka 客户端连接测试问题

weixin_41565755的博客

10-02

2990

1、producer close, err: kafka: client has run out of available brokers to talk to (Is your cluster reachable?) 未开放端口，关闭防火墙或者开发指定端口（9092） 2、send msg failed, err: dial tcp [::1]:9092: connectex: No connection could be made because the target ...

记录解决启动prometheus-kafka-adapter提示“client has run out of available brokers to talk to“的问题

ary的博客

10-19

3422

目录现象描述排查过程踩坑总结参考现象描述用别人构建好的prometheus-kafka-adapter二进制文件，在服务器上按照文档提示配置KAFKA_BROKER_LIST环境变量，启动提示"client has run out of available brokers to talk to"。排查过程在prometheus-kafka-adapter所在的服务器上（以下简称服务器）运行kafka-console-producer.sh，确认不存在网络隔离；执行kafka-console-p

kafka教程1：Consumer，消费者

lianjunzongsiling的博客

09-22

6259

阅读之前假设您已经对kafka有了一定的了解详情和API请参考http://kafka.apache.org/0100/javadoc/index.html?org/apache/kafka/clients/consumer/KafkaConsumer.html KafkaConsumer类简介 public class KafkaConsumer<K,V>extends ...

大数据最佳实践-kafka

program哲学

04-16

6167

kafka各个重难点大全，超详细

macOs 下部署编译kafka exporter项目遇到的问题总结

weixin_41431016的博客

04-23

735

背景线上kafka集群的topic监控采用的是开源的kafka exporter项目来完成的，近期某个kafka集群由于某个topic写入和消费量很大导致集群中的某两个集群io负载打满，kafka exporter 采集信息也因此超时失败，如果指定某个topic采集则不会出现问题，所以猜测是因为一次批量获取所有的topic元数据信息时，遇到这种极端现象就会比较慢，打算查看下采集的实现逻辑来看下是否有优化的空间 kafka exporter项目地址部署时发现依赖go 1.16及以上版本，而本地的环境是

Debezium报错处理系列之五十九：The driver could not establish a secure connection to SQL Server by using Secure

zhengzaifeidelushang的博客

04-12

1502

Debezium报错处理系列之五十九：The driver could not establish a secure connection to SQL Server by using Secure Sockets Layer SSL encryption

kafka连接失败：Failed to start Sarama producer: kafka: client has run out of available brokers to talk to

大虾的世界

05-27

4278

// 报错样式： "Failed to start Sarama producer: kafka: client has run out of available brokers to talk to (Is your cluster reachable?)" 原因：服务器未开启对应端口监听 // 处理，kafka服务器开启端口监听 /sbin/iptables -I INPUT -p tcp --dport 9092 -j ACCEPT ...

golang使用kafka提示：sarama.NewSyncProducer err, message=kafka: client has run out of available brokers t

ktztysj的博客

09-12

2593

golang使用kafka提示：sarama.NewSyncProducer err, message=kafka: client has run out of available brokers to talk to (Is your cluster reachable?) kafka安装网上很多，本人这就不详述，默认配置端口9092，zookeeper为2181 在golang运行如下代码： package main import ( “fmt” “github.com/...

记录一次，docker和本机网络方面的实践经验

最新发布

xiamu66的博客

05-20

433

事情的开始是这样的：我在学习某个项目的时候，需要在docker中创建kafka容器。我需要访问的地址为：kafka:9092，这里需要golang程序与kafka容器在同一个docker网络中，无法通过本机网络直接访问docker中的kafka服务。因为kafka服务并没有暴露端口给外部。

golang通过SSL链接Kafka遇到的问题

送人玫瑰,手留余香!

04-02

4493

问题：项目想用SSL来链接kafka，在使用的过程中遇到几个特别的坑现象：程序在消费和生产的时候出现错误： 2019/04/02 20:02:22 unable to create kafka client: "kafka: client has run out of available brokers to talk to (Is your cluster reachable?)" 然后看...

如何捕获kafka报错信息

07-29

要捕获Kafka的报错信息，你可以通过使用Spring Kafka提供的错误处理器(Error Handler)来实现。下面是一种常见的处理方式： 1. 创建一个实现ErrorHandler接口的自定义错误处理器类，用于处理Kafka报错信息。 ```java import org.apache.kafka.clients.consumer.ConsumerRecord; import org.springframework.kafka.listener.ErrorHandler; import org.springframework.kafka.listener.ListenerExecutionFailedException; import org.springframework.kafka.support.Acknowledgment; import org.springframework.util.backoff.BackOff; import org.springframework.util.backoff.FixedBackOff; public class CustomErrorHandler implements ErrorHandler { @Override public void handle(Exception thrownException, ConsumerRecord<?, ?> record, Consumer<?, ?> consumer, MessageListenerContainer container) { // 捕获Kafka报错信息并进行处理 if (thrownException instanceof ListenerExecutionFailedException) { ListenerExecutionFailedException failedException = (ListenerExecutionFailedException) thrownException; // 获取异常的原因并进行相应的处理 Throwable cause = failedException.getCause(); if (cause != null) { // 处理异常信息 } } // 可以选择进行一些其他操作，如重试或记录错误日志 } @Override public void handle(Exception e, ConsumerRecord<?, ?> consumerRecord) { // 处理没有指定消费者和容器的情况 } @Override public void handle(Exception e, ConsumerRecord<?, ?> consumerRecord, Consumer<?, ?> consumer) { // 处理没有指定容器的情况 } @Override public void handle(Exception e, ConsumerRecord<?, ?> consumerRecord, Consumer<?, ?> consumer, String s) { // 处理没有指定容器和主题的情况 } } ``` 在上面的例子中，我们创建了一个CustomErrorHandler类来自定义错误处理。在handle方法中，我们可以捕获Kafka报错信息并进行相应的处理，如记录日志、重试等。 2. 在Kafka消费者配置中设置自定义错误处理器。 ```java @Configuration @EnableKafka public class KafkaConsumerConfig { @Bean public ConsumerFactory<String, String> consumerFactory() { // 创建ConsumerFactory配置... } @Bean public ConcurrentKafkaListenerContainerFactory<String, String> kafkaListenerContainerFactory() { ConcurrentKafkaListenerContainerFactory<String, String> factory = new ConcurrentKafkaListenerContainerFactory<>(); factory.setConsumerFactory(consumerFactory()); // 设置自定义错误处理器 factory.setErrorHandler(new CustomErrorHandler()); return factory; } } ``` 在上面的例子中，我们通过设置ConcurrentKafkaListenerContainerFactory的setErrorHandler方法来指定使用自定义的错误处理器。通过以上步骤，你就可以使用自定义的错误处理器来捕获Kafka的报错信息，并根据需要进行相应的处理。