Streamsets FAQ（四）SS同步binlog到kudu时间少8小时

最新推荐文章于 2021-04-13 14:25:36 发布

芦苇_

最新推荐文章于 2021-04-13 14:25:36 发布

阅读量1.1k

点赞数 2

分类专栏： Streamsets # Streamsets FAQ

本文链接：https://blog.csdn.net/maomaosi2009/article/details/108315385

版权

1、问题描述

当前使用的是CDH-6.2.0和SS-3.13.0版本，在同步增量binlog数据到MySQL的时候datetime格式的字段时间会多出8小时，基于这个原因我们修改了SS里面的mysql-binlog-connector-java-0.13.0.jar源码

streamsets-3.13.0中使用的mysql-binlog-connector-java是0.13.0版本，找到0.13.0的源码，

https://github.com/shyiko/mysql-binlog-connector-java/blob/0.13.0/src/main/java/com/github/shyiko/mysql/binlog/event/deserialization/AbstractRowsEventDataDeserializer.java

修改其中的AbstractRowsEventDataDeserializer.java，修改其中的fallbackToGC方法，重新定义Calendar类对象，去除TimeZone.getTimeZone("GMT")

private static long fallbackToGC(int year, int month, int dayOfMonth, int hourOfDay,
                                         int minute, int second, int millis) {
	// 将原先的Calendar c = Calendar.getInstance(TimeZone.getTimeZone("GMT"));注释掉
	//Calendar c = Calendar.getInstance(TimeZone.getTi