在使用DataGo同步csv文件到ck遇到的一些问题总结

最新推荐文章于 2024-02-28 11:26:31 发布

齐爱巴

最新推荐文章于 2024-02-28 11:26:31 发布

阅读量409

点赞数

文章标签：大数据

本文链接：https://blog.csdn.net/m0_46517444/article/details/119376063

版权

1.在datago目录下运行datago.sh -jsonFile ./Task/k_line_1min.job -date 20210803。其中-date 后面跟着的是当前日期。 .job文件放到Task目录下面。运行.job文件。

出现的问题主要在两个方面：
1.日期转换异常。无法将csv文件中的日期字段成功转换到ck数据库的date类型的字段。
解决方法：将错误的时间格式：yyyy/MM/dd改成正确的格式：yyyy-MM-dd。
2. 报列数据溢出，数据为[]。排查发现检验数据集最后一行有空行，删除空行。数据成功同步到ck。