PriviledgedActionException as:root (auth:SIMPLE) cause:0: No such file or directory

刚学MapReduce.
写WordCount的代码(代码没问题的情况下) , 运行后报错:

错误代码
19/11/12 07:57:19 INFO Configuration.deprecation: session.id is deprecated. Instead, use dfs.metrics.session-id
19/11/12 07:57:19 INFO jvm.JvmMetrics: Initializing JVM Metrics with processName=JobTracker, sessionId=
19/11/12 07:57:19 WARN mapred.JobClient: Use GenericOptionsParser for parsing the arguments. Applications should implement Tool for the same.
19/11/12 07:57:19 INFO mapred.JobClient: Cleaning up the staging area file:/tmp/hadoop-root/mapred/staging/okakio637697353/.staging/job_local637697353_0001
19/11/12 07:57:19 WARN security.UserGroupInformation: PriviledgedActionException as:root (auth:SIMPLE) cause:0: No such file or directory
Exception in thread "main" 0: No such file or directory
在百度搜索后,有以下解决方案:

1:
错误原因:mapred-site.xml配置有问题:
正确配置如下

 <property>
<name>mapreduce.framework.name</name>
 <value>yarn</value>
 </property>

试过之后不行

2:
每个NM的core-site.xml设置下下面的属性就可以了

  <property>
    <name>dfs.permissions</name>
    <value>false</value>
  </property>

试过之后不行

3:
加入各种代码:
如:System.setProperty("HADOOP_USER_NAME","root");,
conf.set("dfs.permissions","false");
运行后依然报错

最终解决方案:

打开everything搜索/tmp/hadoop-root/,把这个tmp文件移到hadoop相同的磁盘下,再次运行即可成功
备注: 可能有人用户名是中文的 , 就会导致乱码的情况, Hadoop不会帮你创建tmp目录, 在代码里加入: conf.set(“hadoop.tmp.dir”,“自己的路径名”)
如:conf.set(“hadoop.tmp.dir”,“E:\tmp\hadoop-abc”);
在这里插入图片描述
在这里插入图片描述

  • 4
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 4
    评论
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值