关于flink kafkaconsumer的偏移量存储位置测试
偏移量存储位置:
1、如果设置了状态后端和checkpoint机制,同时有下面设置:
FlinkKafkaConsumer.setCommitOffsetsOnCheckpoints(true)
(上面代码表示每次checkpoint的时候把组消费偏移量提交到kafka,默认为true)
那么组消费偏移量会记录到 状态后端 和 kafka
2、如果设置了状态后端和checkpoint机制,同时有下面设置:
FlinkKafkaConsumer.set...
原创
2021-06-26 15:48:53 ·
1801 阅读 ·
0 评论