使用sqoop将数据导入postgresql时报错,显示有字符超过pg表设定的20长度,但是并没有显示是那个字段超出。
原因分析可能存在字符转化的时候,超出了原有的长度。
解决方案
1.查看pg库那些字段设置长度为20
2.使用length函数,定位临时表里面超过20字符的字段
select * from 临时表 where length(长度设定为20的字段名)>20
3.定位到相应字段后,我们再去查看是我们原表在转化时存在存在错误,还是源表里面就存在相应的问题。
4.比如笔者这边,时间的字符串与timestamp转化时,导致字符边长,时间戳精确到毫秒之后多了一个.0
5.当然如果时原表就存在的问题,而不是我们同步脚本的问题,我们需要找上下游的人确认数据的问题数据那一边。如果需要在原表的基础上进行修改。