flink中KafkaTopicPartitionState的offset与committedOffset

KafkaTopicPartitionState的变量如下：

offset表示已经处理的偏移量，committedOffset表示已经提交的偏移量，按道理来说恒有offset>committedOffset。

接下来根据代码执行顺序有如下代码片段：

可以看出，每次consumer poll完数据后就会设置新的offset，即调用setOffset。

 

然后我们看每次getOffset会在哪儿调用

可以看出，是在ck的snapshotState环节调用的，同时把offset放到了pendingOffsetsToCommit（待提交的偏移量）中。

 

然后我们看setCommittedOffset。

跟代码可以发现这是在ck的notifyCheckpointComplete环节实现的。

可以得出结论offset>committedOffset。

 

最后，运行测试类KafkaITCase中的testBrokerFailure方法可以发现如下情况：

得证offset>committedOffset