我的hive错误锦集-1
性能问题:
一个条件的错误
在去年写了一个hive脚本,今年需求有变,条件细分。于是脚本改动较大,也没有考虑太多就开始改动。完成后测试运行速度,发现运行时间为改动前的三倍,当时需求很急,草草跑出数据提交了。
后来又需要该脚本来用,才想起来效率问题,于是开始研究速度慢下来的原因。
第一次将37个步骤的运行时间分离出来,发现问题出在某一个步骤上。这就好办了,单独拿出问题脚本,如下所示:
CREATE TABLE TEMP_CHBUY_28_${V_DATE}_${V_PROV} STORED AS RCFILE AS