错误: 找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster

  • yarn执行MapReduce任务时,找不到主类导致的

[2019-12-31 20:02:59.464]Container exited with a non-zero exit code 1. Error file: prelaunch.err. Last 4096 bytes of prelaunch.err : Last 4096 bytes of stderr : 错误: 找不到或无法加载主类 org.apache.hadoop.mapreduce.v2.app.MRAppMaster在这里插入图片描述

解决:在命令行输入:hadoop classpath

[admin@master hadoop]$ hadoop classpath
/opt/module/hadoop/etc/hadoop:/opt/module/hadoop/share/hadoop/common/lib/*:/opt/module/hadoop/share/hadoop/common/*:/opt/module/hadoop/share/hadoop/hdfs:/opt/module/hadoop/share/hadoop/hdfs/lib/*:/opt/module/hadoop/share/hadoop/hdfs/*:/opt/module/hadoop/share/hadoop/mapreduce/lib/*:/opt/module/hadoop/share/hadoop/mapreduce/*:/opt/module/hadoop/share/hadoop/yarn:/opt/module/hadoop/share/hadoop/yarn/lib/*:/opt/module/hadoop/share/hadoop/yarn/*

把上述输出的值添加到yarn-site.xml文件对应的属性 yarn.application.classpath下面,eg:

<property>
        <name>yarn.application.classpath</name>
        <value>/opt/module/hadoop/etc/hadoop:/opt/module/hadoop/share/hadoop/common/lib/*:/opt/module/hadoop/share/hadoop/common/*:/opt/module/hadoop/share/hadoop/hdfs:/opt/module/hadoop/share/hadoop/hdfs/lib/*:/opt/module/hadoop/share/hadoop/hdfs/*:/opt/module/hadoop/share/hadoop/mapreduce/lib/*:/opt/module/hadoop/share/hadoop/mapreduce/*:/opt/module/hadoop/share/hadoop/yarn:/opt/module/hadoop/share/hadoop/yarn/lib/*:/opt/module/hadoop/share/hadoop/yarn/*</value>
</property>

重启yarn,重新跑MapReduce任务。

yarn --daemon stop resourcemanager
yarn --daemon stop nodemanager

yarn --daemon start resourcemanager
yarn --daemon start nodemanager
  • 26
    点赞
  • 50
    收藏
    觉得还不错? 一键收藏
  • 6
    评论
### 回答1: 这个错误消息表明程序在运行时不到org.apache.hadoop.mapreduce.v2.app.mrappmaster。这可能是因为缺少必要的Hadoop库或配置问题导致的。建议检查程序的classpath是否包含所有必需的Hadoop库,并确保Hadoop配置正确。 ### 回答2: 错误原因是无法到或加载主类org.apache.hadoop.mapreduce.v2.app.mrappmaster。这个错误通常是因为Hadoop MapReduce框架的应用程序主类未被正确设置或无法到。 解决这个问题的方法如下: 1. 确认Hadoop的安装和配置是否正确。检查Hadoop的环境变量是否正确设置,并且Hadoop的相关配置文件是否正确。 2. 确认代码是否被正确编译并打包为JAR文件。确保应用程序主类org.apache.hadoop.mapreduce.v2.app.mrappmaster是否正确编译,并且在运行时能够被正确加载。 3. 检查应用程序的启动命令是否正确。确保在运行应用程序时,命令行参数正确设置,并且指定了正确的主类。 4. 检查应用程序的依赖是否正确。如果应用程序依赖其他的外部库,确保这些库已正确添加到应用程序的类路径中。 5. 检查Hadoop集群的运行状态。如果Hadoop集群没有正确运行或配置问题,可能会导致无法加载主类错误。 综上所述,错误"不到无法加载主类org.apache.hadoop.mapreduce.v2.app.mrappmaster"的解决方法包括检查Hadoop的安装和配置、代码的编译和打包、应用程序的启动命令、依赖和集群的运行状态等方面。通过仔细检查这些方面,可以解决这个错误并正常运行MapReduce应用程序。 ### 回答3: 错误信息显示不到无法加载主类 org.apache.hadoop.mapreduce.v2.app.mrappmaster。 这通常是由于缺少相应的依赖库或配置问题导致的。请按照以下步骤检查和解决该问题: 1. 检查Hadoop的版本和安装:首先确保已正确安装并配置了适当的Hadoop版本。请检查Hadoop的安装文件夹和环境变量设置是否正确。 2. 检查依赖库:确保您的应用程序或脚本中包含了正确的Hadoop依赖库。请检查您的项目配置文件(如pom.xml或build.gradle)以确保已正确包含了mapreduce相关的依赖库。 3. 检查类路径:确认您的类路径(classpath)中包含了Hadoop相关的jar文件。可以通过在命令行中显示类路径来验证类路径是否正确设置。 4. 检查配置文件:查看您的Hadoop配置文件(如core-site.xml、mapred-site.xml和yarn-site.xml)是否正确配置了必要的参数。特别是,确保mapreduce.framework.name属性正确设置为yarn。 5. 检查日志文件:查看Hadoop的日志文件(如hadoop-mapreduce-historyserver.log)以获取更多关于错误的详细信息。在日志中搜索“Error”或“Exception”等关键词,以到可能导致问题的具体原因。 如果您尝试了以上步骤但问题依然存在,可以尝试重新安装Hadoop或联系Hadoop的支持团队获取更专业的帮助。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 6
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值