hive踩坑记录之报错:Java heap space

分享一个hive的 踩坑记录,执行 需要跑MapReduce任务的语句时,报错Error: Java heap space(JAVA 堆空间不足),排查该错误是由于hive任务所使用的内存数量造成的
解决办法:
1、第一个方案
在hive-env.sh中进行更改:
添加
export HADOOP_HEAPSIZE=4096这个属性
2、第二个方案
设置 set io.sort.mb=10; 默认值是100
io.sort.mb 的作用是排序所使用的内存数量,默认值: 100M,需要与mapred.child.java.opts相配 默认:-Xmx200m,io.sort.mb的值不能超过mapred.child.java.opt的值,否则会报JAVA堆内存不足的错误。

  • 2
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值