hadoop 解决内存溢出问题 2.1 GB of 2.1 GB virtual memory used. Killing container

hadoop集群启动成功之后,牛刀小试一下自带的jar包里的程序,计算一下pi值:

报如下错误:2.1 GB of 2.1 GB virtual memory used. Killing container

1.在etc/hadoop/yarn-site.xml文件中,修改检查虚拟内存的属性为false,如下:

 

<property>
    <name>yarn.nodemanager.vmem-check-enabled</name>
    <value>false</value>
</property>

运行一下还是报同样的错误

再次添加如下内容:

2.修改mapred-site.xml 配置文件,加入如下内容:

<property>
<name>mapreduce.cluster.map.memory.mb</name>
<value>-1</value>
</property>
<property>
<name>mapreduce.cluster.reduce.memory.mb</name>
<value>-1</value>
</property>
 

 

重新启动集群

成功!!计算出pi值

原文参考:https://blog.csdn.net/ma0903/article/details/48289731

https://blog.csdn.net/dd390738878/article/details/9785679

 

 

  • 6
    点赞
  • 21
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值