Alluxio整合MapReduce报错 Caused by: java.io.IOException: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out

最新推荐文章于 2021-12-22 17:33:44 发布

温文尔雅的流氓

最新推荐文章于 2021-12-22 17:33:44 发布

阅读量739

点赞数

分类专栏： Alluxio

本文链接：https://blog.csdn.net/hll19950830/article/details/103198375

版权

Alluxio 专栏收录该内容

1 篇文章 0 订阅

订阅专栏

查看Yarn NodeManager日志，发现以下信息：

Caused by: org.apache.hadoop.util.DiskChecker$DiskErrorException: Could not find user/cache/hadoop/appcache/application_15... in any of the configured local directories

解决方法：
在yarn-site.xml 中配置yarn.nodemanager.local-dirs，对应的路径必须在hdfs-site.xml中的hadoop.tmp.dir路径下，否则yarn会报错找不到缓存文件

 <property>
        <name>yarn.nodemanager.local-dirs</name>
        <value>/home/hadoop/app/hadoop-2.6.0-cdh5.15.1/tmp/nm-local-dir</value>
 </property>