Flink源码修改
狄杰丶
单创数据平台负责人
展开
-
记一次TopN 引起的Flink任务报错
解决由TopN+canal-json引起的Flink报错问题原创 2020-10-26 18:47:26 · 1852 阅读 · 2 评论 -
Flink 如何将聚合结果写入kafka ——读写canal-json
概述1.11版本最重要的特性Hive Streaming在之前的博客,包括Flink中文社区的微信公众号上,都和大家聊过不少次了。那么除此之外,还有什么特性值得大家关注呢?CDC数据的解析:可以解析canal、debezium推到kafka中的binlog;如果在binlog中是个DELETE的操作,那么会自动解析成撤回流,将之前那条下发过的数据撤回;美中不足的是,只支持读,不支持写,这也就以为着无法将撤回流写入kafkaPostgres Catalog:如果要用Postgres中的表,不需要再C原创 2020-08-05 14:57:16 · 6320 阅读 · 2 评论