打包eclipse中的MapReduce类及在linux上运行jar出现的问题

注意:我使用的是centos7+hadoop2.7.3的环境

今天将eclipse中写好的MapReduce打成jar包传到linux服务器上,跑了下hadoop集群。

首先先记录下如何将eclipse的工程打成jar包

1.选中你要打包的包右键选中export
2.输入jar选择如下 然后next

在这里插入图片描述

3.点击Browse选择一个你想保存jar包的位置 然后next

在这里插入图片描述

4.然后一直next到最后无法next时点击Browse 选中你想打包的main类,ok,finish。然后出现一个waring继续ok。完成后你刚刚保存的路径下就会出现一个咖啡图标的jar包了

在这里插入图片描述

5.我的就是这样,就成功啦
在这里插入图片描述

在hadoop集群上跑出现的问题

1.有时候会出现safe mode的问题
hadoop dfsadmin -safemode leave
可以用来退出安全模式
2.会出现在这里插入图片描述
停在job处,无法执行下一步操作。
此时的解决方法如下(默认三个datanode):
a.将yarn-site.xml修改成如下
在这里插入图片描述
然后重启hadoop在尝试使用jar包,如果还未成功在执行b。
b.将datanode和namenode的主机名设置好,并修改datanode和namenode的/etc/hosts为你修改的主机名比如下图。此时在重启hadoop集群。运行MapReducejar包就可以啦。
在这里插入图片描述

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值