诸葛小猿

最近线上偶尔爆出kafka消费延迟，但是系统的数据量并不大，为什么会延迟呢？具体分析如下。思路：1.查看机器中数据积压情况，是否是因为数据量过大导致的消费延迟。2.统计数据发送kafka成功到数据消费出来（还未做业务处理）的耗时。3.统计数据消费出来并完成业务处理的耗时。一、查看kafka机器的topic在每个分区的数据分配情况。可以看出该group中有一个topic，该topic有6个partition，消费者分布在两台机器上（两个ip）,每台机器有三个消费者。重点关注每个partiti

1.查看 Topic 列表bin/kafka-topics.sh --list --bootstrap-server node1:9092,node2:9092,node3:90922.查看指定 Topic 明细bin/kafka-topics.sh --describe --bootstrap-server node1:9092,node2:9092,node3:9092 --topic topicName3.创建 Topicbin/kafka-topics.sh --create --bo