kafka consumer group总结

kafka消费者api分为high api和low api，目前上述demo是都是使用kafka high api，高级api不用关心维护消费状态信息和负载均衡,不用关心offset。
高级api的一些注意事项：
1. 如果consumer group中的consumer线程数量比partition多，那么有的线程将永远不会收到消息。
因为kafka的设计是在一个partition上是不允许并发的，所以consumer数不要大于partition数 


2，如果consumer group中的consumer线程数量比partition少，那么有的线程将会收到多个消息。并且不保证数据间的顺序性，kafka只保证在一个partition上数据是有序的，


3，增减consumer，broker，partition会导致rebalance，所以rebalance后consumer对应的partition会发生变化 


4，High-level接口中获取不到数据的时候是会block的


关于consumer group（high api）的几点总结：
1，以consumer group为单位订阅 topic，每个consumer一起去消费一个topic；
2，consumer group 通过zookeeper来消费kafka集群中的消息（这个过程由zookeeper进行管理）；
相对于low api自己管理offset，high api把offset的管理交给了z