INFO - OutputCommitter set in config null & INFO - Failed to createOutputCommitter

伟红-long-term

于 2019-08-14 18:49:23 发布

阅读量736

点赞数

分类专栏：大数据 Linux系统 Hadoop bug 文章标签：报错 MapReduce

本文链接：https://blog.csdn.net/qq_41587198/article/details/99595553

版权

博客内容讲述了在执行MapReduce任务时遇到'Failed to createOutputCommitter'和'NullPointerException'的错误。问题源于自定义OutputFormat类后未正确设置，以及可能缺少YARN相关依赖。提供了调试信息和可能的解决方案。

摘要由CSDN通过智能技术生成

INFO - Failed to createOutputCommitter
java.lang.NullPointerException
at org.apache.hadoop.mapred.LocalJobRunner$Job.createOutputCommitter(LocalJobRunner.java:489)
at org.apache.hadoop.mapred.LocalJobRunner$Job.run(LocalJobRunner.java:500)
INFO - Job job_local1685174099_0001 running in uber mode : false
INFO - map 0% reduce 0%
在这里插入图片描述
程序卡着不运行…

debug模式下：在这里插入图片描述
Job.getInstance()报错：
Method threw ‘java.lang.IllegalStateException’ exception. Cannot evaluate org.apache.hadoop.mapreduce.Job.toString()