kafka使用记录
文章平均质量分 75
sunhs1024
这个作者很懒,什么都没留下…
展开
-
【记一次kafka客户端报org.apache.kafka.common.errors.NotLeaderForPartitionException异常处理】
项目场景:项目中,向kafka集群中生产消息,由下游系统进行消费处理。问题描述:在项目实际应用过程中,发现经常性的出现异常:原因分析:根据报错内容可知,发送消息时,broker已经不是对应分区的leader了,也就是说问题发生在leader重选举时,由于报错相对比较频繁,即重选举的动作发生的比较频繁,所以问题的重点就是分析是什么原因导致了leaderf发生了重选举。关于kafka的leadert重选举以及都有哪些情况可能触发重选举,这里不在详细说明,具体可以参考:https://shirenc原创 2022-04-28 15:53:10 · 5173 阅读 · 0 评论 -
【记一次kafka启动报org.apache.zookeeper.KeeperException$NoAuthException:=Noauth for/consumers】
问题描述开发环境的一个老kafka集群,集群所在机器的一个节点磁盘被占满了导致broker节点挂掉了,进行重新启动时,报错:org.apache.zookeeper.KeeperException$NoAuthException:=Noauth for/consumers原因分析由于这个kafka集群是一个老集群,并且是没有鉴权认证的,此时居然报了一个没有权限的错误,给我都干懵了… 不过问题还是要看的,于是乎,进入后台看了一下集群的配置文件,发现kafka集群确实是不带鉴权,但是kafka和zk之间是原创 2022-04-11 14:19:41 · 6211 阅读 · 6 评论 -
【记一次kafka报org.apache.kafka.clients.consumer.CommitFailedException异常处理】
项目场景:项目中,使用到了kafka作为消息中间件,项目作为消费端,消费消息并进行业务处理问题描述在实际应用的过程中,发现偶尔会有消费数据报:org.apache.kafka.clients.consumer.CommitFailedException异常原因分析:提示:这里填写问题的分析:1、解决方案:提示:这里填写该问题的具体解决方案:例如:新建一个 Message 对象,并将读取到的数据存入 Message,然后 mHandler.obtainMessage(READ_原创 2022-03-22 16:28:59 · 5402 阅读 · 0 评论