问题背景:
利用 doris 官网的方式,用flink CDC 同步mysql整库数据至doris
flink-doris-connector-1.18-1.5.2.jar
flink 1.18
doris 2.0.1
问题分析:
找不到类,一般情况下要么是 jar 包冲突,要么是没有依赖包。
由于 flink-doris-connector-1.18-1.5.2.jar 是直接从官网下载的,所以通过查看源码,可以看到com.ververica.cdc.debezium 这个类是“flink-sql-connector-mysql-cdc”这个依赖在使用,再看 pom.xml 中 “flink-sql-connector-mysql-cdc”是 ‘‘provide’’ 进行打包的,没有把这打进去。查看 flink 的lib 目录 也没有看见这个包。
解决方案:
给flink的lib手动添加 flink-sql-connector-mysql-cdc-2.4.2.jar(由于源码中是2.4.2版本)
然后重启 flink 集群,再运行任务即可