大数据之kafka-java
文章平均质量分 70
ameko_2019
高中圣陶杯-全国第三名
展开
-
KafkaOffsetMonitor 监控异常处理(消息堆积)
问题监控发现消费队列没消费完,但是实际情况是消费完的,而且用命令监控是正常的。 管理界面监控: 命令行监控: bin/kafka-consumer-offset-checker.sh –zookeeper * –topic * –group ** –broker-info 分析1:topic异常造成: 2:重启过kafka,也许kafka的分区需要重新分配解决删除对应的topic:原创 2017-07-12 10:28:14 · 1807 阅读 · 1 评论 -
Kafka异常处理(客户端和消费者都找不到topic)
问题生产问题,OffsetMonitor 监控发现运行了一个月的kafka突然间消费有lag.kafka重启成功 用命令行创建topic成功../bin/kafka-topics.sh --create --zookeeper ** --replication-factor 2 --partitions 28 --topic newiot003用命令查看topic也存在, ./bin/kafka-原创 2017-08-16 15:19:44 · 5679 阅读 · 0 评论 -
Kafka异常处理(消费者不消费数据)
问题生产问题,OffsetMonitor 监控发现运行了一个月的kafka突然间消费有lag.而且消费端不消费数据分析在客户端写try..catch…捕获异常: 2017-08-27 09:47:48,103 ERROR [com.ecar.eoc.message.platform.kafka.Kafka211Context] - [kafka_Exception———->>org.apache.原创 2017-09-04 15:03:17 · 18915 阅读 · 1 评论