comsumer配置

bootstrap.servers

key.deserializer

value.deserializer

 

group.id：一个group id区分一个group

 

heartbeat.interval.ms :comsumer只有在poll才会发心跳包，因为poll后还要处理数据，这个值最好是session.timeout.ms的三分之一

session.timeout.ms：超过该值，则认为该消费者client已经出故障，进行balance

(这两个设置，不好限制处理消息的时间。在kafka0.10.1之后的版本中，kafka consumer是一个是heartbeat 线程，另一个是processing线程，添加max.poll.interval.ms，两次Poll之间最大时间，就是处理消息最长时间，这样更好限制处理消息的时间，并规定 max.poll.interval.ms必须大于session.timeout.ms)

request.timeout.ms：consumer请求超时时间

 

fetch.max.wait.ms：在broker端等待最大时间，即使当前消息大小小于fetch.min.bytes也会回包

fetch.min.bytes： broker端最小fetch字节，达到这个大小才会给consumer回包

 

auto.commit.interval.ms：自动提交offset的间隔时间

auto.offset.reset:取值如下，一般取earliest

earliest

当各分区下有已提交的offset时，从提交的offset开始消费；无提交的offset时，从头开始消费

latest

当各分区下有已提交的offset时，从提交的offset开始消费；无提交的offset时，消费新产生的该分区下的数据

none

topic各分区都存在已提交的offset时，从offset后开始消费；只要有一个分区不存在已提交的offset，则抛出异常

 

 

connections.max.idle.ms:连接闲置时间

enable.auto.commit:是否自动commit

exclude.internal.topics:内部topic是否可以暴露给comsumer（）

max.poll.records:每次poll等待获取的最大消息数量

max.partition.fetch.bytes：每次poll等待获取的消息 大小限制

partition.assignment.strategy:分配策略range,roundrobin

 

 

receive.buffer.bytes：

send.buffer.bytes

check.crcs

client.id

 

interceptor.classes