flink
文章平均质量分 55
ITZHIHONH
这个作者很懒,什么都没留下…
展开
-
FlinkCDC系列:数据同步对部分字段的处理,只更新部分字段
一个可选的、以逗号分隔的正则表达式列表,与列的完全限定名称匹配以从更改事件记录值中排除。列的完全限定名称的格式为databaseName。一个可选的、以逗号分隔的正则表达式列表,与列的完全限定名称匹配以包含在更改事件记录值中。列的完全限定名称的格式为databaseName。单表可以只写列名,如果是多表、多库,必须要:databaseName.表名.列名,这种方式的配置。原创 2023-10-31 16:15:31 · 1727 阅读 · 1 评论 -
FlinkCDC系列:通过skipped.operations参数选择性处理新增、更新、删除数据
在flinkCDC源数据配置,通过debezium.skipped.operations参数控制,配置需要过滤的 oplog 操作。操作包括 c 表示插入,u 表示更新,d 表示删除。默认情况下,不跳过任何操作,以逗号分隔。配置多个操作,需要英文逗号分隔。原创 2023-10-31 15:57:05 · 1624 阅读 · 1 评论 -
ARM下Flink1.8.1编译,Could not resolve dependencies for project
flink编译过程中下载的依赖包很多,在apache-maven-3.5.4/conf/settings.xml配置ali和huawei两个mirror,下载会加速不少。<mirror><id>nexus-aliyun</id><mirrorOf>*,!hadoop</mirrorOf><name>Nexu...原创 2020-05-06 17:40:02 · 1611 阅读 · 1 评论