Exception in thread “main“ org.apache.hadoop.security.AccessControlException: Permission denied: use

最新推荐文章于 2024-05-20 17:49:59 发布

我是Sol啊

最新推荐文章于 2024-05-20 17:49:59 发布

阅读量584

点赞数 1

分类专栏： Bug 文章标签： apache hadoop 大数据 spark

本文链接：https://blog.csdn.net/qq_59705101/article/details/132692883

版权

Bug 专栏收录该内容

7 篇文章 0 订阅

订阅专栏

本文讲述了在Spark将数据写入Hive表时遇到的HDFS权限问题，由于本地用户缺少权限，解决方案是修改Hadoop的hdfs-site.xml配置文件，禁用HDFS权限检查，重启集群和Hive服务后问题得以解决。

摘要由CSDN通过智能技术生成

1.问题:spark往Hive表里写数据时,出现hdfs权限安全问题

2.原因:本地用户没有权限

2.解决方案:修改hdfs配置文件

进入Hadoop安装目录下修改 /etc/hadoop/hdfs-site.xml，

添加如下配置信息

<property>
  <name>dfs.permissions</name>
  <value>false</value>
  <description>
    If "true", enable permission checking in HDFS.
    If "false", permission checking is turned off,
    but all other behavior is unchanged.
    Switching from one parameter value to the other does not change the mode,
    owner or group of files or directories.
  </description>
</property>

然后重启hdfs集群,重启Hive相关服务,重新运行即可