【CDH】新集群搭建角色权限不足无法创建目录

最新推荐文章于 2023-12-03 15:07:30 发布
最新推荐文章于 2023-12-03 15:07:30 发布
阅读量353 收藏
点赞数
分类专栏： Problem Solving 文章标签： hadoop hbase 大数据 cloudera
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/why_not_study/article/details/125436067
版权

一、问题描述

CDH新集群搭建过程中，出现YARN启动异常、HBase启动异常、Spark启动异常的情况。

二、问题分析

经查看日志，分别如下三个图所示。
YARN启动异常
HBase启动异常
Spark启动异常

三、问题解决

CDH的问题，基本是日志描述了什么问题，你就解决什么问题。日志这里描述的是角色权限不足，只需要使用指定用户给文件夹赋予相应的权限：

#解决hdfs用户根目录权限不足问题
export HADOOP_USER_NAME=hdfs
hdfs dfs -chmod 777 /

#解决mapred用户/
最低0.47元/天 解锁文章
why_not_study
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
mysql集群连接权限不足_MySql Cluster 集成安装，Centos，坑点集锦
weixin_28947253的博客
02-19 429
坑点集锦安装步骤->安装步骤查看错误->错误集锦节点作用->节点作用测试结果->测试结果[MgmtSrvr] ERROR -- Failed to delete file '/usr/local/mysql/mysql-cluster/ndb_1_config.bin.1',权限不足，使用root启动[MgmtSrvr] INFO -- The default config...
CDH大数据集群搭建(2019-12-20).docx
12-26
完全从0到1.从虚拟机搭建开始到集群参数配置，一步一步超级详细，无经验也可搭建。本文档采用完全离线方式搭建，搭建过程轻松，清晰。
cdh5.14重启hdfs报无法创建/tmp/.cloudera_health_monitoring_canary_files 解决办法
SelectDB的专栏
10-13 2727
[root@masternode ~]# sudo -u hdfs hdfs dfsadmin -safemode leave Safe mode is OFF   上述命令可能会报： Error: JAVA_HOME is not set and could not be found. 解决办法： [hadoop@masternode ~]$ sudo -i [root@mastern...
cdh用户权限_CDH搭建后，HDFS连接的权限问题
weixin_36329414的博客
12-23 243
Caused by: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.security.AccessControlException): Permission denied: user=1hdfs, access=WRITE, inode="/hdfsapi/test/a.txt":hdfs:supergroup:-rw-r--r--...
hadoop启动时权限不足
weixin_30950607的博客
06-08 4314
之前在使用时的没用去懂.ssh,后来因为一些情况直接将其权限修改为777. 第一位7等于4+2+1，所以就是rwx，所有者有读取、写入、执行的权限；第二位7也是4+2+1，rwx，同组用户具有读取、写入、执行权限；第三位7，代表公共用户有读取、写入、执行的权限。 在启动datanode和namenode时这样会出现如下错误 权限不足Permission denied， 需要将他们的文件权限...
CDH环境下HDFS权限问题
麦迪康
07-08 1041
CDH环境下Hadoop平台最高权限用户是hdfs，属于supergroup组。默认HDFS会开启权限认证，所以操作时，需要将root用户切换到hdfs用户，否则会报错。 问题： org.apache.hadoop.security.AccessControlException: Permission denied: user=root, access=WRITE, inode="/recsys2021":hdfs:supergroup:drwxr-xr-x drwxr-xr-x - hdfs s
基于CDH3的BigInsights集群的搭建与应用
02-26
如何在用户现有的CDH平台之上集成IBM特有的数据分析模块，既是客户实际应用中的迫切需求，也是IBMBigData的重要发展策略。本文首先简要介绍BigInsights与Cloudera集成的相关背景，在此基础上介绍基于cloudera的...
CM_CDH大数据集群搭建总结.zip
11-14
综上所述，搭建一个完整的CM_CDH大数据集群是一项复杂的工作，涉及多个组件的配置和集成。理解每个组件的功能和相互依赖关系是成功搭建的关键，同时，解决搭建过程中遇到的问题也是提升运维能力的重要环节。
CDH5.11集群搭建文档
05-09
CDH5.11集群搭建文档，包括环境配置、mysql安装、cdh配置，以及一些遇到的错误问题解决方法
CDH集群搭建手册
03-15
CDH集群搭建手册 CDH（Cloudera Distribution of Hadoop）是一种基于 Apache Hadoop 的大数据解决方案，提供了一个功能强大的大数据分析平台。以下是 CDH 三节点基于 CentOS 6.8 的安装和卸载教程。 一、CDH 安装...
CDH新集群没有hive创建表权限记录
sujins5288的博客
11-26 553
1.集群装好后在hive创建表时遇到FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:Got exception: org.apache.hadoop.security.AccessControlException Permission ...
Hadoop启动集群时出现如下报错信息：/tmp/hadoop-hadoop-datanode.pid: Permission denied如何解决？
m0_69671651的博客
03-23 1066
hadoop用户启动集群报错的解决办法
HDFS block丢失过多进入安全模式（safe mode）,不能在hdfs创建文件的解决方法
lesssssss的博客
04-20 1350
退出安全模式 hadoop dfsadmin -safemode leave。这个错误的原因是,丢失的block数量到达配置文件指定的阈值,hdfs开启了安全模式。删除丢失的block块 hdfs fsck / -delete。虚拟机任意目录下执行。
操作HDFS文件目录报AccessControlException : Permission denied 解决
keizhige的博客
11-18 776
操作HDFS文件目录报AccessControlException : Permission denied 解决
安装cdh中遇到的问题
warm_day的博客
02-26 333
永久关闭 修改selinux的配置文件，重启后生效。 打开 selinux 配置文件 [root@localhost ~]# vim /etc/selinux/config 修改 selinux 配置文件 将SELINUX=enforcing改为SELINUX=disabled，保存后退出 1.hbase中Hmaster启动失败： 原因可能有：hbase权限不够 zk缓冲 解决方...
HUE问题总结1
chenla5762的博客
03-20 262
1.如果HUE 在hdfs 上只能创建文件夹，不能创建文件怎么办？ 将hadoop的 hosts 都配置到hue这台机器上的hosts 中，不要有遗漏 2.运行oozie 报错，proxyUser cannot be null, If you're attempting to use u...
HUE整合HDFS后无法创建文件问题的解决
weixin_43190860的博客
06-21 1665
错误信息提示： 这是由于登录HUE的账户和HDFS目录操作权限的账户不一致导致的（比如我是用admin登录的hue，而HDFS目录的权限是hdfs） 解决方法：关闭HDFS设置中的权限检查，然后重启 创建文件成功 这里hiveTest.sh文件的创建用户就是admin，和其他文件不同 ...
Linux 普通用户创建文件夹（目录）权限不足的解决办法
最新发布
kaixinjiaoluo的博客
12-03 1万+
Linux 普通用户创建文件夹（目录）权限不足的解决办法。
linux安装Hadoop、hbase
qq_57810709的博客
10-17 4874
首先按打开终端窗口，输入如下命令创建新用户接着使用如下命令设置密码，可简单设置为hadoop可为hadoop。
基于CDH的spark集群搭建
09-15
基于CDH的spark集群搭建，包括了httpd等服务的部署过程

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值