Hadoop启动权限问题

最新推荐文章于 2022-04-08 22:52:57 发布
最新推荐文章于 2022-04-08 22:52:57 发布
阅读量3.1k 收藏 10
点赞数 1
分类专栏： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44322234/article/details/104941606
版权
在安装完Hadoop后，启动伪分布式集群时遇到权限问题。尝试了免密登录配置和删除.ssh文件未果。错误信息指向logs文件权限，发现logs属组和用户为root。通过修改logs文件权限，成功解决了启动问题。
摘要由CSDN通过智能技术生成

Hadoop启动权限问题

hadop 安装完成后，运行脚本start-all.sh 启动hadoop 伪分布式集群，出现以下问题
在这里插入图片描述
一开始以为是免密登录没有成功，删除.ssh文件后，在配置一遍免密登录依然出现这个问题，随后看了错误信息，初步怀疑是hadoop 里面的logs文件无法打开，后面又提示了权限的问题，在次确认是hadoop里面的logs文件权限问题。

  • 显示logs所属的组和用户为root,这里应该出了错误

在这里插入图片描述

输入以下命令
  • chown -R  myn logs

在这里插入图片描述

最后再次启动就成功了

weixin_44322234
关注
  • 1
    点赞
  • 踩
  • 10
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 4
    评论
专栏目录
订阅专栏
Apache Ranger Hadoop 集群权限框架_了解Ranger---Ranger工作笔记001
添柴程序猿的专栏
07-25 1062
通过操作Ranger控制台，管理员可以轻松的通过配置策略来控制用户访问HDFS文件夹、HDFS文件、数据库、表、字段权限。这些策略会由Ranger提供的轻量级的针对不同Hadoop体系中组件的插件来执行。插件会在Hadoop的不同组件的核心进程启动后，启动对应的插件进程来进行安全管理。1.Apacheranger是一个Hadoop集群权限框架，提供操作、监控、管理复杂的数据权限，它提供一个集中的管理机制，管理基于yarn的Hadoop生态圈的所有数据权限。.........
单机Hadoop配置
最新发布
ruoxi356的博客
12-07 724
5个配置hadoop-env core-site hdfs-site mapred-site yarn-site
解决Linux Hadoop 启动 权限不足
weixin_45813351的博客
04-08 3452
使用命令：sudo chown -hR dgj /home/dgj/software/hadoop
Hadoop常见错误解决
npu_wy的专栏
04-17 725
原文地址:http://www.cnblogs.com/haoxinyue/archive/2013/06/06/hadoop.html 1. 通过命令和查看日志文件查看hadoop启动和运行情况 在NameNode端，可以通过 tail -100 /var/log/hadoop/hadoop/hadoop-hadoop-namenode-hadoop-namenode.lo
chown: 无效的用户: hadoop-3.1.4_Ubuntu 21.04 用户主目录权限将14年来首次变更及新功能预览...
weixin_33154775的博客
01-27 1587
Ubuntu 21.04的代号已经被揭露，但您要做好心理准备：这是一个庞然大物的名字！英勇的野兔？傲慢的仓鼠？催眠的蹄兔？不，Ubuntu 21.04的代号是Hirsute Hippo！河马！这是被选择代表下一个稳定版本的Ubuntu的开发代号，Ubuntu桌面主管Martin Wimpress在Twitter上透露了最新的代名词。Ubuntu Linux的下一版本Ubuntu 21.04开发正在...
hadoop 错误
haidao2009的专栏
11-13 1283
Invalid directory in dfs.data.dir: Incorrect permissio n for /hadoop/hadoop-data, expected: rwxr-xr-x, while actual: rwxrwxr-x。 hadoop集群dfs.data.dir目录权限问题导致节点无法启动
hadoop启动过程中遇到的问题
沉底的石头
06-08 5526
http://mail-archives.apache.org/mod_mbox/hadoop-hdfs-user/201207.mbox/%3C50097B6C.8060704@cs.uni-kassel.de%3E http://blog.csdn.net/huoyunshen88/article/details/9089797 2013-06-08 15:04:15,62
Hadoop 权限管理
苏的博客
10-17 1万+
如下图，hadoop访问控制分为两级，其中ServiceLevel Authorization为系统级，用于控制是否可以访问指定的服务，例如用户/组是否可以向集群提交Job，它是最基础的访问控制，优先于文件权限和mapred队列权限验证。Access Control on Job Queues在job调度策略层之上，控制mapred队列的权限。DFSPermmision用户控制文件权限。目前版本中
Hadoop datanode启动失败：Hadoop安装目录权限的问题
07-29
### Hadoop Datanode启动失败：Hadoop安装目录权限问题详解 #### 一、问题背景与现象 在部署Hadoop集群的过程中，用户可能会遇到Datanode启动失败的情况。这一问题通常表现为，在尝试启动Hadoop集群时，Datanode...
hadoop启动mysql服务_【完全分布式Hadoop】（六）MySQL5.7服务端安装，DBA权限设置以及客户端配置...
weixin_29997937的博客
03-06 952
一、 下载MySQL5.7先检查mysql是否已经存在：ps -ef|grep mysqldrpm -qa |grep -i mysql #如果有mysql-lib的rpm先不要卸载查看系统是否有默认安装的mariadb，如果有，和前边的openjdk一样卸载掉rpm -qa | grep mariadb二、 解压mysql-5.7.24-linux-glibc2.12-x86_64.tar...
linux如何授权HADOOP,hadoop用户权限管理
weixin_42511201的博客
05-26 2960
在上一篇博文我描述了在单机linux上安装hadoop，网址：http://my.oschina.net/hetiangui/blog/142897，这里我主要描述下hadoop的用户权限管理。上篇文章说过，hadoop实际上就是就是一个liunx虚拟机，它的文件操作命令同linux，而它的用户呢？它的用户实际上就是linux主机的用户。这里我们做的例子就是：新建一个liunx用户，并为该linu...
Ubuntu18.04安装Hadoop
Nick的博客
04-25 850
课程需要 安装Hadoop(太卷了) 安装Ubuntu 清华源镜像： Index of /ubuntu-releases/18.04/ | 清华大学开源软件镜像站 | Tsinghua Open Source Mirror https://mirrors.tuna.tsinghua.edu.cn/ubuntu-releases/18.04/ 安装后网络模式使用NAT 配置SSH无密码登录 安装: sudo apt-get install openssh-server cd ~/.ssh/
基于Ubuntu20.04.3 Hadoop伪分布式搭建途中遇到问题
qq_54216182的博客
10-27 1301
问题1：安装完JDK，利用java -version命令查看时，出现 openjdk version “17” 2021-09-14 OpenJDK Runtime Environment (build 17+35-ubuntu-120.04) OpenJDK 64-Bit Server VM (bulid 17+35-ubuntu-120.04, mixed mode,sharing) 这是因为VMware虚拟机安装后，会自带jdk -openjdk，我们需要删除自带jdk,并且安装我们需求
linux 报错 chown: invalid user:
skalpat的博客
04-01 5万+
你的linux系统没有tomcat这个用户吧，执行cat /etc/passwd，看下有没有这个用户，没有的话就需要用useradd加一下。 添加一般用户 # useradd tt
hadoop完全分布式因权限问题无法发起动
我不会crossover
04-18 2661
问题描述：在hadoop账户下在搭建hadoop完全分布式的时候配置都一切正常，但是在hadoop账户下就是无法启动集群，总是报出如下错误：This script is Deprecated. Instead use start-dfs.sh and start-yarn.sh Starting namenodes on [Master] Master: chown: cannot access ...
hadoop文件路径权限修改——chown
luo981695830的博客
07-24 5263
修改hdfs路径的文件路径所属用户权限时，报错，提示org.apache.hadoop.security.AccessControlException: Non-super user cannot change owner. 意思是说当前用户执行修改用户权限时，不是超级用户，不能执行 在hadoop中root用户不是最高权限用户 切换hdfs用户，再次执行命令 hadoop dfs -chown -R admin /apps/hive 这里是修改文件夹， 加了-R ，如果是文件则不需要..
hadoop常见错误及处理方法
热门推荐
yonghutwo的专栏
06-30 5万+
如果大家在安装的时候遇到问题，或者按步骤安装完后却不能运行Hadoop，那么建议仔细查看日志信息，Hadoop记录了详尽的日志信息，日志文件保存在logs文件夹内。 无论是启动，还是以后会经常用到的MapReduce中的每一个job，以及HDFS等相关信息，Hadoop均存有日志文件以供分析。 1、hadoop-root-datanode-master.log 中有如下错误：
hadoop中用户权限问题修改
weixin_42117812的博客
09-19 2030
问题描述：其中的一种情况是当你在root用户下可以启动的时候，但是在hadoop用户下都启动不了的时候。这时候就需要查看权限了。 ##解决方法 chown -R hadoop:hadoop /opt/bigdata ...
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

weixin_44322234

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值