go 链接kafka报错解决

已于 2023-04-23 16:35:29 修改
阅读量9.1k 收藏
点赞数
分类专栏： Go相关 gopacket kafka 文章标签： kafka 分布式
于 2019-09-23 14:50:26 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_27333977/article/details/101205495
版权
Go相关 同时被 3 个专栏收录
4 篇文章 0 订阅
订阅专栏
gopacket
4 篇文章 0 订阅
订阅专栏
kafka
1 篇文章 0 订阅
订阅专栏

报错错误：

producer close, err: kafka: client has run out of available brokers to talk to (Is your cluster reachable?)

原因端口未对外开放；

Centos 开启所有端口对外

systemctl stop firewalld.service

jj吉吉国王
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
go-kafka-example:Golang Kafka消费者和生产者示例
05-06
Golang Kafka示例 示例Golang Kafka消费者和生产者 设置 制片人 go run cmd/producer/main.go 消费者 标志： brokerList 话题 分区（默认值：0） offsetType messageCountStart（默认值：0） go run cmd/...
Go-JOCKO用Golang实现Kafka
08-14
Go-JOCKO是一个开源项目，它使用Golang编程语言实现了Apache Kafka的功能，为开发者提供了一种用Go语言构建的消息队列系统。Kafka是一种分布式流处理平台，常用于日志收集、用户活动跟踪、流数据处理等场景。JOCKO的...
记录解决启动prometheus-kafka-adapter提示“client has run out of available brokers to talk to“的问题
ary的博客
10-19 3207
目录现象描述排查过程踩坑总结参考 现象描述 用别人构建好的prometheus-kafka-adapter二进制文件，在服务器上按照文档提示配置KAFKA_BROKER_LIST环境变量，启动提示"client has run out of available brokers to talk to"。 排查过程 在prometheus-kafka-adapter所在的服务器上（以下简称服务器）运行kafka-console-producer.sh，确认不存在网络隔离； 执行kafka-console-p
【解决方案】kafka: client has run out of available brokers to talk to (Is your cluster reachable?)
浪漫至死不渝
05-25 1万+
  终端中报错kafka: client has run out of available brokers to talk to (Is your cluster reachable?)   同时Kafka启动时报错: Opening socket connection to server localhost/127.0.0.1:2181. Will not attempt to authenticate using SASL (unknown error) 解决方法：    检查自己的zookeeper和
go连接Kafka报错kafka: client has run out of available brokers to talk to
雪峰流云
01-21 1万+
问题出现的场景： 有个go写的项目，原来是用go vendor来管理依赖包的，现在改为是用go module方式了，转换之后，编译成功，发现了上面的错误。很显然连接kafka集群报错了。 问题的原因： 网上搜了下，很多说是防火墙啥的问题，其实不是。本质原因是，我项目使用的如下kafka客户端库 github.com/Shopify/sarama 版本升级到当前最新版，这个最新版无法连接kafka集群，换为原来的旧版本就没有问题。 大家不要被报错内容迷惑，跟客户端多少没有关系的。特此记录一下，以作
Kafka常见错误及解决办法
热门推荐
yiweiyi329的博客
09-24 4万+
1、报错信息： org.apache.kafka.clients.consumer.OffsetOutOfRangeException: Offsets out of range with no configured reset policy for partitions: {qukan_log_v3-198=2289560518} 报错原因：当消费者消费offset大于或小于当前kafka集...
kafka 客户端连接测试问题
weixin_41565755的博客
10-02 2726
1、producer close, err: kafka: client has run out of available brokers to talk to (Is your cluster reachable?) 未开放端口，关闭防火墙或者开发指定端口（9092） 2、send msg failed, err: dial tcp [::1]:9092: connectex: No connection could be made because the target ...
golang使用kafka提示：sarama.NewSyncProducer err, message=kafka: client has run out of available brokers t
ktztysj的博客
09-12 2534
golang使用kafka提示：sarama.NewSyncProducer err, message=kafka: client has run out of available brokers to talk to (Is your cluster reachable?) kafka安装网上很多，本人这就不详述，默认配置端口9092，zookeeper为2181 在golang运行如下代码： package main import ( “fmt” “github.com/...
kafka连接失败：Failed to start Sarama producer: kafka: client has run out of available brokers to talk to
大虾的世界
05-27 4197
// 报错样式： "Failed to start Sarama producer: kafka: client has run out of available brokers to talk to (Is your cluster reachable?)" 原因：服务器未开启对应端口监听 // 处理，kafka服务器开启端口监听 /sbin/iptables -I INPUT -p tcp --dport 9092 -j ACCEPT ...
golang kafka sarama 消费者组
01-20
Sarama是一个开源的Go语言客户端，提供了全面的功能，包括生产者、消费者、Admin操作等。本篇文章将详细探讨如何创建一个Sarama消费者组以及相关配置。 首先，让我们分析提供的代码片段。`Kafka` 结构体包含了与...
kafka-go：Go中的Kafka图书馆
02-04
卡夫卡动机我们在Segment上非常依赖Go和Kafka。 不幸的是，在撰写本文时，Kafka的Go客户端库的状态并不理想。 可用的选项有： ，它是迄今为止最受欢迎的工具，但很难使用。 它的文档记录很少，API公开了Kafka协议的...
kafka 解决log4j:ERROR Failed to rename错误解决办法错误的jar包
最新发布
10-31
log4j:ERROR Failed to rename
项目部署到docker，samara报错fail to start consumer, err:init kafka consumer error: kafka: client has run out
weixin_43160918的博客
09-25 284
在容器中，如果advertised.listener配置的是localhost 的话，client就会访问localhost。又因为容器的网络是隔离的，所以实际上容器是访问了自己的9092端口。所以会导致访问错误。client访问broker首先会请求metadata，相当于找一个类似代理获取真实的访问地址。在KAFKA_ADDR中我使用了引号。在docker-compose中的env不需要加引号。读者如果还有其他问题，还可以关注一下 kafka配置的advertise_listener。
golang通过SSL链接Kafka遇到的问题
送人玫瑰,手留余香!
04-02 4417
问题：项目想用SSL来链接kafka，在使用的过程中遇到几个特别的坑 现象： 程序在消费和生产的时候出现错误： 2019/04/02 20:02:22 unable to create kafka client: "kafka: client has run out of available brokers to talk to (Is your cluster reachable?)" 然后看...
如何捕获kafka报错信息
07-29
要捕获Kafka的报错信息，你可以通过使用Spring Kafka提供的错误处理器(Error Handler)来实现。下面是一种常见的处理方式： 1. 创建一个实现ErrorHandler接口的自定义错误处理器类，用于处理Kafka报错信息。 ```java import org.apache.kafka.clients.consumer.ConsumerRecord; import org.springframework.kafka.listener.ErrorHandler; import org.springframework.kafka.listener.ListenerExecutionFailedException; import org.springframework.kafka.support.Acknowledgment; import org.springframework.util.backoff.BackOff; import org.springframework.util.backoff.FixedBackOff; public class CustomErrorHandler implements ErrorHandler { @Override public void handle(Exception thrownException, ConsumerRecord<?, ?> record, Consumer<?, ?> consumer, MessageListenerContainer container) { // 捕获Kafka报错信息并进行处理 if (thrownException instanceof ListenerExecutionFailedException) { ListenerExecutionFailedException failedException = (ListenerExecutionFailedException) thrownException; // 获取异常的原因并进行相应的处理 Throwable cause = failedException.getCause(); if (cause != null) { // 处理异常信息 } } // 可以选择进行一些其他操作，如重试或记录错误日志 } @Override public void handle(Exception e, ConsumerRecord<?, ?> consumerRecord) { // 处理没有指定消费者和容器的情况 } @Override public void handle(Exception e, ConsumerRecord<?, ?> consumerRecord, Consumer<?, ?> consumer) { // 处理没有指定容器的情况 } @Override public void handle(Exception e, ConsumerRecord<?, ?> consumerRecord, Consumer<?, ?> consumer, String s) { // 处理没有指定容器和主题的情况 } } ``` 在上面的例子中，我们创建了一个CustomErrorHandler类来自定义错误处理。在handle方法中，我们可以捕获Kafka报错信息并进行相应的处理，如记录日志、重试等。 2. 在Kafka消费者配置中设置自定义错误处理器。 ```java @Configuration @EnableKafka public class KafkaConsumerConfig { @Bean public ConsumerFactory<String, String> consumerFactory() { // 创建ConsumerFactory配置... } @Bean public ConcurrentKafkaListenerContainerFactory<String, String> kafkaListenerContainerFactory() { ConcurrentKafkaListenerContainerFactory<String, String> factory = new ConcurrentKafkaListenerContainerFactory<>(); factory.setConsumerFactory(consumerFactory()); // 设置自定义错误处理器 factory.setErrorHandler(new CustomErrorHandler()); return factory; } } ``` 在上面的例子中，我们通过设置ConcurrentKafkaListenerContainerFactory的setErrorHandler方法来指定使用自定义的错误处理器。 通过以上步骤，你就可以使用自定义的错误处理器来捕获Kafka的报错信息，并根据需要进行相应的处理。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值