1、Datax同步数据时报错出现脏数据
(1)问题现象
{"message":
"No enum constant com.alibaba.datax.plugin.unstructuredstorage.reader.
UnstructuredStorageReaderUtil.Type.BIGINT","record"......}
(2)问题原因
- DataX不能完全支持所有Hive表的数据类型(本表中不支持bigint,所以报脏数据),仅仅支持一下数据类型
(3)解决方式
将DataX启动文件中的hdfsreader中的column字段的类型改成DataX支持的类型
(本表中将bigint改成long)
- 任务重跑成功