集群运行MapReduce任务报错Error: Java heap space

最新推荐文章于 2021-09-04 18:45:44 发布

bigcharsen

最新推荐文章于 2021-09-04 18:45:44 发布

阅读量2.3k

点赞数 2

分类专栏：分布式 hadoop mapreduce 文章标签： mapreduce heap hadoop

本文链接：https://blog.csdn.net/bigcharsen/article/details/78035902

版权

分布式同时被 3 个专栏收录

5 篇文章 0 订阅

订阅专栏

hadoop

1 篇文章 0 订阅

订阅专栏

mapreduce

1 篇文章 0 订阅

订阅专栏

集群运行MapReduce任务时，有部分任务在跑reduce任务时报错：

17/09/19 19:48:00 INFO mapreduce.Job: Task Id : attempt_1505821347382_0001_r_000000_0, Status : FAILED
Error: Java heap space
Container killed by the ApplicationMaster

这里写图片描述

< property>
< name>mapred.child.java.opts< /name>
< value>-Xmx1024m< /value>
< /property>

子进程所使用的虚拟机内存大小
或者

代替 mapred.child.java.opts.
< property>
< name>mapreduce.map.java.opts< /name>
< value>< /value>

< property>
< name>mapreduce.reduce.java.opts< /name>
< value>< /value>