hdfs 权限问题解决

Permission denied: user=mapred, access=WRITE, inode="/":hdfs:supergroup:drwxr-xr-x

下面的步骤也许能管用

第一步：

sudo -u hdfs hdfs dfs -chmod 775 /

第二步：

sudo -u hdfs hdfs dfs -mkdir /user

sudo -u hdfs hdfs dfs -chown mapred:mapred /user

sudo -u hdfs hdfs dfs -mkdir /tmp

sudo -u hdfs hdfs dfs -chown mapred:mapred /tmp

解决hive

原因：hdfs上没有root用户，也没有对应的文件夹/user/root

会默认以root身份去将作业写入hdfs文件系统中，对应的也就是 HDFS 上的/user/xxx , 我的为/user/root,   由于 root用户对hdfs目录并没有写入权限，所以导致异常的发生。而hdfs才有权限创建/user/root

解决方法：

1、第一种

在hdfs的配置文件中，将dfs.permissions修改为False（不推荐）

2、第二种

执行这样的操作，使用hdfs用户（最高权限）

hadoop dfs -mkdir -p /user/root（如果路径存在可不执行）

hadoop dfs -chown root:hdfs /user/root（如果所属用户一致可不执行）
hadoop dfs -chmod 777 /user/root(如果执行上面操作已解决可不执行，我没有走)

3.第三种

vim /etc/profile

添加：export HADOOP_USER_NAME=hdfs（hdfs为最高权限）
source /etc/profile（记得执行，以保证立即生效）

也可以执行 sed -i '$a export HADOOP_USER_NAME=hdfs' ,记得也要source一下

注意：root可以是其他的用户（路径），如报错是/user/xxx,将root换成xxx即可。