kafka 配置参数记录

1-fetch.min.bytes
配置Consumer在一次拉取请求(调用poll()方法)中能从kafka中拉取的最小量,默认值1B。如果返给Consumer的数据量小于该值则等待,直到满足这个参数。
调大可以增加吞吐量,但是会延迟。

2-fetch.max.bytes
配置Consumer在一次拉取中获取的最大数据量,默认值50M。
若非空分区第一条消息大于设置值,也可以正常消费,kafka接收消息的的最大值通过服务端message.max.bytes来设置。

3-fetch.max.wait.ms
指定kafka的等待时间,默认值是500ms。
如果一值不满足拉取数据最小量,则等待该设置时间返回,与延迟有关。

4-max.patition.fetch.bytes
配置每个分区返回给Consumer的最大数据量,默认值 1M。每次拉取消息分区的最大消息量。

5-max.poll.records
配置一次拉取请求中最大的消息数,默认500条。

6-connection.max.idle.ms
指定多久之后关闭闲置连接,默认540000ms,即9分钟。

7-exclude.internal.topics
指定内部主题是否向消费者公开,默认false。
如果设置true,只能用subscribe(Collection)方式订阅内部主题。

8-receive.buffer.bytes
设置Socket接收消息缓冲区(SO_RECBUF)的大小,默认65336B,64KB。
设置为-1则使用默认值。

9-send.buffer.bytes
设置Socket发送消息缓冲区(SO_SNDBUF),默认131072B,即128KB。

10-request.timeout.ms
设置Consumer等待请求相应的最长时间,默认30000 ms。

11-metadata.max.age.ms
配置元数据过期时间,默认 3000 ms,即5分钟。

12-reconnect.backoff.ms
设置尝试重连主机之间的等待时间,默认 50 ms。

13-retry.backoff.ms
设置重新发送失败请求到指定主题分区的等待时间,默认 100 ms 。

14-isolation.level
设置消费者事务隔离级别。
详细内容待补充。

  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值