Impala数据报错
背景
该报错的产生原因是因为有个哥们在hue
的impala
当中执行
create table test_table as select * from orgin_table
其中: orgin_table
是kudu
的表,orgin_table
的id
的字段的类型是bigint
类型。
接下来的表创建成功了,然后再查询这表的时候,数据内部发生了错误,并且提示了如下的报错信息,
Error converting column: 0 to BIGINT
Error parsing row: file: hdfs://nameservice1/user/hive/warehouse/mos.db/test_table/f24a1e0841d83114-b564012900000000_742834691_data.0., before offset: 8388608
解决
这个解决方案如何想到的。。。灵光一闪(其实是与其他的组件产生了联想,判定可能是这样的问题),在创建表的时候指定一下存储的格式。。。
SQL语句修改如下:
create table test_table stored as parquet as select * from orgin_table
问题解决。。。
总结
虽然我不太清楚这里面的原理,通过经验判断处理掉了这个问题。我觉得还有待提升自己,今年的学习计划得安排一下了。如果大佬有什么更好的见解,请在下方留言,谢谢!