本文档总结了在使用 Flink CDC 进行数据同步时遇到的常见问题及解决方案，包括Oracle驱动找不到、数据库历史主题缺失、字段名错误、断点续传和字段抽取乱码等。提供了解决这些问题的具体步骤，并推荐了官方文档作为参考。
文章目录
- 前言
- 一、常见问题
-
- 1.No suitable driver found for jdbc:oracle:thin:@10.101.37.167:8888/orclpdb
- 2.The db history topic or its content is fully or partially missing. Please check database history topic configuration and re-execute the snapshot
- 3.com.ververica.cdc.connectors.shaded.org.apache.kafka.connect.errors.DataException: file is not a valid field name
- 4.断点续传
- 5.oracle number 字段抽取乱码
- 5.org.apache.kafka.connect.data.SchemaBuilder cannot be cast to com.ververica.cdc.connectors.shaded.org.apache.kafka.connect.data.SchemaBuilder
- 参考资料
- 结尾
前言
Flink CDC 常用两种方式进行数据的全量+增量一体的数据同步，数据清洗等功能。主要使用方法：
- 使用 DataStream API 进行任务的逻辑实现
- 使用 Flink SQL 的方式进行任务的提交
一、常见问题
1.No suitable driver found for jdbc:oracle:thin:@10.101.37.167:8888/orclpdb
解决方案：
#修改配置文件
vim conf/flink-conf.yaml
classloader.resolve-order: parent-first
采用此方式，如有缺少其他依赖报错，应将依赖包放到flink/lib下，且注意配置flink环境变量
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
