kafka
wwd_hb
这个作者很懒,什么都没留下…
展开
-
NOT_LEADER_FOR_PARTITION
现场collector生产kafka消息报: NOT_LEADER_FOR_PARTITION 错误,错误位置:org.apache.kafka.client.internal.Sender中298行kafka server.log报 That server is not the leader of this partition问题原因: broker意外停止或执行bin/kafka-pre...原创 2020-01-08 14:23:24 · 5589 阅读 · 0 评论 -
Spark-Streaming任务消费Kafka中topic(Resource)堆积问题排查&恢复
1. 观察该该topic消费组 Resource-group确定为Spark-Streaming任务消费resource主题出现堆积,堆积数据20Y2.访问spark master web ui 查看 Resource任务,发现running applications 中该没有该任务,该任务已经死掉,查看死掉应用日志发现日志中只有一句: Received signal term. 没有其他错误...原创 2019-12-25 17:58:54 · 702 阅读 · 0 评论 -
kafka 报 Error when handling request {topics=[test]} (kafka.server.KafkaApis)kafka.admin.AdminOperati
部署kafa的启动时候碰到一个问题kafka.admin.AdminOperationException: replication factor: 1 larger than available brokers: 0经过排查可能有如下几种原因:1:客户端连接kafka server,但kafka server此时可能未完全启动,会在kafka server启动时抛出这个错误。原创 2017-03-10 15:46:02 · 5023 阅读 · 0 评论 -
kafka consumer 日志疯狂输出 marking the coordinator host:9092 for dead group consumer-test
最近在调试spark-streaming消费kafka消息时发现日志疯狂输出 marking the coordinator host:9092 for dead group consumer-testkafka server为集群,连接时使用的是hostname:9092方法去连接,程序也不报错,去kafka server当中查询consumer-test组也存在,经过排查原创 2017-05-10 11:49:49 · 9735 阅读 · 0 评论