java.sql.SQLException: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask. ORC split generation failed with exception: java.lang.ArrayIndexOutOfBoundsException: 2
这个错误,在网上查了很多,都不能解决。
现状是:
sql:
select distinct k.cookie,k.id member from kafka k where k.day='2022-01-09'
and k.id in(select id from etl_mes m where m.date='2022-01-09')
通过hive查询,完全没有问题,占资源也不是很过分。但是通过zeppelin查询就报上面的错误。
给hive、yarn、hdfs增加配置,一样不解决问题。还是报上面的错误。
最后:查了一下文件的角色,如图。经过试验,hdfs hive的文件可以查询,flume hive的文件不可查询。
对 hdfs hive 角色的文件进行查询,hadoop的All Applications客户端就可以看见进程信息:
对于这个报错和这个结果,本人表示很无助。这就是小白的悲伤吗……