本文介绍了Kafka消费者的消费模式，包括pull模式的工作原理及优势，以及在无数据时的处理策略。接着，讨论了分区分配策略，如RoundRobin和Range，并解释了分区重新平衡的情况。最后，阐述了offset的维护，特别是在Kafka 0.9版本之后的变化。
一、Kafka 消费者
1. 消费方式
- consumer采用 pull（拉）模式从broker中读取数据
- push（推）模式很难适应消费速率不同的消费者，因为消息发送速率是由broker决定的。它的目标是尽可能以最快速度传递消息，但是这样很容易造成consumer来不及处理消息，典型的表现就是拒绝服务以及网络拥塞。而pull模式则可以根据consumer的消费能力以适当的速率消费消息
- pull 模式不足之处是，如果kafka没有数据，消费者可能会陷入循环中，一直返回空数据。针对这一点，Kafka的消费者在消费数据时会传入一个时长参数timeout，如果当前没有数据可供消费，consumer会等待一段时间之后再返回，这段时长即为timeout
2. 分区分配
订阅专栏 解锁全文
1050
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
