【kafka消费同步提交和异步提交方式(kafka-python)
自动提交
同步提交
异步提交
异步加同步提交几种方式的优缺点介绍和代码示例-可以设置自动提交时间间隔,每间隔固定时间提交一次当前消费最大offset,但无法确保提交成功,不知道消费状态
1.2 同步提交
-同步提交可以自定义拉取数据多少以及fetch的数据offset等元数据信息,回阻塞直到提交成功,也可以计算出每次消费的时间,消费状态等,每次处理完了才会进行下一次,遇到异常可以自己进行处理记录等
1.3 异步提交加回调函数
- 异步提交是通过单独线程异步进行提交,有可能提交成功有可能提交失败,可以通过回
原创
2022-06-23 17:41:01 ·
2493 阅读 ·
0 评论