#hive报错NoMatchingMethodException No matching method for class org.apache.hadoop.hive.ql.udf.UDFToString
最近在回顾过去的离线数仓项目,运行脚本时遇到了一个错误,花费了很长时间才解决。特此记录一下,避免再犯:
如下图所示:
报错出现后我第一时间认为是select语句中字段与表字段的类型没有对应。事实上,就是这个原因。
此时我使用desc + 表名去查看对应的表结构,结果由于粗心大意没有仔细审视字段的类型。这个报错本质上是因为某个字段所对应的类型应该是array,但是实际字段可能对应了其他类型。我的第一反映是修改insert overwrite语句。但经过对几十行的查询语句进行逐行分析,才发现应该是表结构出现了问题。最终回看表结构才发现本应该是array类型的字段被我错误写成了string类型的字段。一个简单的问题浪费好久的时间。
总之,遇到这个报错首先需要确定的是:表字段类型是否能和insert overwrite语句中的各个字段类型对应起来,同时也要减少使用表名.*
的写法,因为很有可能出现以上报错。尽量使用表名.列明
的写法,准确、可读性强且不易报错。