最近需要将用户的mysql数据实时导入到hana中。
方案一为:mysql-cdc---->debezium-source-connector---->kafka----->debezium-sink-connector---->hana
方案一执行过程中,由于mysql的表中有字段类型为:datatime, 默认值为CURRENT_TIMESTAMP。经过测试验证,该时间字段只要加上默认值,debezium-sink-connector就报错:Invalid Java object for schema type INT64: class java.util.Long for field "null"。基本断定这是kafka-connector的bug,于是寻找其他方案,由于flink-connector使用的人较多,社区较活跃,尝试将kafka-connector换成:flink-connector,就是下面的方案二。
方案二为:mysql-cdc---->debezium-source-connector---->kafka----->flink-connector---->hana
经过验证,方案二执行过程中没有再出现方案一中的报错问题。