FAILED: NullPointerException null

问题描述

在阅读“基于Hadoop生态圈的数据仓库实践”中，碰到了一点问题记录下来。

• 创建表

hive> CREATE TABLE cdc_time  
    > (    
    >  last_load date,  
    >  current_load date  
    > );  
OK
Time taken: 0.416 seconds

• 插入数据，就会告知NPE。

hive> insert into cdc_time select date_add(current_date(), -1), date_add(current_date(), -1);
FAILED: NullPointerException null

• insert into values 这种方式插入，则执行正常。

hive> insert into cdc_time values ('2016-10-11', '2016-10-11');
Query ID = training_20161013105050_4e520957-60b7-4e58-ae03-a5adb9afcf83
...
MapReduce Jobs Launched: 
Stage-Stage-1: Map: 1   Cumulative CPU: 2.15 sec   HDFS Read: 3423 HDFS Write: 90 SUCCESS
Total MapReduce CPU Time Spent: 2 seconds 150 msec
OK
Time taken: 33.227 seconds

解决方法

经查证，这是hive的一个bug。
如果sql是 insert into select...时，且不带 from
子句，则会报告NPE问题。

解决方案是：利用一张额外的表，并且只含有一行数据，或者限定where条件结果是一行数据。

hive> insert into cdc_time select date_add(current_date(), -1), date_add(current_date(), -1) from product where product_code = '1';
Query ID = training_20161013105858_3a2adeb4-98e2-48b2-9afc-6a05139a282c
Total jobs = 3
...
Stage-Stage-1: Map: 1   Cumulative CPU: 2.12 sec   HDFS Read: 4145 HDFS Write: 90 SUCCESS
Total MapReduce CPU Time Spent: 2 seconds 120 msec
OK
Time taken: 23.285 seconds

这个问题在hive1.2.0版本中修复。

https://issues.apache.org/jira/browse/HIVE-7641