设置hadoop的client端的jvm参数

以此来纪念自己的解决方法:

今天遇到一个问题:怎么设定hadoop提交程序时client的jvm大小(即hadoop jar 这个提交程序jvm的大小)。
网上兜了一大圈,都是说什么设定map或Reduce任务的jvm的大小。可这个不是我所想要的,最后改变了收索关键词后(hadoop client jvm)发现了一片文章讲述了这样一个场景,跟着其指示做了一下,发现真的可以。
下面就是设定:
首先要找到我们安装好hadoop后我们的hadoop-env.sh文件在哪,cdh(4.2.0)的一般在/etc/hadoop/conf 下面。
其二,打开这个hadoop-env.sh文件,找到一个
# The following applies to multiple commands (fs, dfs, fsck, distcp etc)
export HADOOP_CLIENT_OPTS="-Xmx4294967296 -Xms4294967296 $HADOOP_CLIENT_OPTS"
这个export开始可能是被注释掉了,把注释去掉,添加自己需要的jvm参数
最后,保存这个修改即可。

  这样我们就可以在hadoop jar时享受自己调节jvm的参数了。

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值