记一次hive的内存溢出(OutOfMemoryError: Java heap space)排查
刚刚从java组转岗找数据组,学习大数据的知识,开发语言也从java转到python新奇之外也遇到了诸多问题,其中最令我头疼的就是在hive上的统计任务总是三天两头地报告OutOfMemory一开始因为有别的同事的任务干扰,我以为是计算资源不够导致的,但后来把任务转移到了另一个集群后,问题仍然存在,让我百思不得其解。问题的具体描述如下:统计逻辑使用python pyhs2连接hiv
原创
2015-12-28 14:41:13 ·
21366 阅读 ·
3 评论