解决Eclipse登陆Hadoop出现的权限问题

问题描述:Eclipse安装了Hadoop的插件后,会读取本机用户作为任务提交和HDFS操作的用户,如果本机用户名在HDFS当中不存在,常会报下面的错:

org.apache.hadoop.security.AccessControlException: org.apache.hadoop.security.AccessControlException: Permission denied: user=***, access=WRITE, inode=***:hadoop:supergroup:rwxr-xr-x


解决方法:

1,到服务器上修改hadoop的配置文件:conf/hdfs-core.xml, 找到 dfs.permissions 的配置项 , 将value值改为 false

2,修改本机用户名为Hadoop上已有用户名(对windows用户来说,修改用户名或者新建用户)

3,修改inode=***目录的权限,hadoop fs -chmod 777  ***

4,在代码中加入System.getProperties().put("HADOOP_USER_NAME", username);(username为HDFS上已有用户名)

个人觉得第四种方法最有效,可以从根本解决问题


  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值