kafka
文章平均质量分 92
第一片心意
持续学习
展开
-
kafka生产者事务踩坑记录
spark消费kafka,程序一直卡主不运行,也不报错,最后发现和kafka上游生产者开启了事务有关。原创 2023-02-18 21:15:12 · 1594 阅读 · 0 评论 -
flink自定义轮询分区产生的问题
1. 项目背景1.1. 介绍从4个分区的kafka特定主题中接受设备数据,然后根据主题的key进行轮询分区。第一次按顺序分配,已分配完的之后直接获取之前的分配结果即可,以保证key相同的数据可以进入下个算子的同一个分区。1.2. 代码1.2.1.自定义分区/** * 自定义轮询分区器<br> * 对于一个未被分区的key,对其分配下一个分区索引;对于一个已经...原创 2020-01-19 16:56:16 · 2852 阅读 · 0 评论 -
flink读取kafka中的数据的所有信息
本博客为work文件转化的长图片,直接点击即可放大观看。word文件下载地址为:https://kdocs.cn/l/sdbCFoZ1P?f=131[文档] 读取kafka中的数据的所有信息.docx...原创 2019-09-27 16:21:06 · 4244 阅读 · 0 评论