orderer与kafka的offset对应不上问题解析及解决方案

orderer与kafka的offset对应不上问题解析及解决方案:

原因是orderer与kafka的最新的offset不一定一样,而且kafka会清理kafka里的数据,这样导致orderer请求offset对应的数据,kafka里没有,导致orderer会宕机,解决方案如下:

1. 手动修改kafka日志的偏移量,操作如下:

获取orderer启动时所期望的offset

修改kafka数据偏移

  • 如果kafka上还保存着orderer所期望的offset的数据则只需要修改replication-offset-checkpoint文件,如下图中00000000000000000000.log可知道起始偏移是从0开始的,说明还保存着orderer所期望的offset数据,所以只需要将replication-offset-checkpoint的147198改为61958,然后重新启动kafka和orderer正常
  • 如果kafka上已经丢失了orderer所期望的数据,例如文件命名已变为00000000000000061988.log,则将所有的kafka-logs删除,重新启动生成以00000000000000000000.log的文件,让后将3个文件命名为00000000000000061958.log,然后修改recovery-point-offset-checkpoint和replication-offset-checkpoint配置文件,然后重新启动kakfa和orderer正常。

2. 修改kafka存放消息配置,改成永久性存放消息,修改kafka目录下的config目录下的server.property的log.retention.hours=-1

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

乌苏舞

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值