hudi
文章平均质量分 57
宝哥大数据
大数据、机器学习、深度学习
展开
-
Hudi基本概念-表类型与查询类型
【代码】Hudi基本概念-表类型与查询类型。原创 2023-04-22 11:45:25 · 96 阅读 · 0 评论 -
Hudi Compaction
默认情况下,Hudi 压缩是异步执行的。分2步执行。原创 2023-04-16 08:41:50 · 147 阅读 · 0 评论 -
Hudi集成Flink-写入方式
参考: https://chbxw.blog.csdn.net/article/details/119841434。CDC(change data capture) 保证了完整数据变更,目前主要有两种方式。1、kafak 作为 源表,flinksql 消费kafka。1、使用 mysql-cdc 监听 binlog。3、将 kafka 中数据 写入 hudi。2、kafka 作为 sink表。接下来我们主要介绍 第二种方式。2、创建hudi目标表。3、写入sink 表。原创 2023-04-14 00:08:25 · 1579 阅读 · 0 评论 -
hudi 与 Flink 整合
只编译 packaging/hudi-flink-bundle 及其依赖的模块。修改pom.xml 中 flink 的版本。原创 2023-04-09 15:09:31 · 440 阅读 · 0 评论