启动hadoop3.1.3集群报错

最新推荐文章于 2023-09-16 17:12:14 发布

QYHuiiQ

最新推荐文章于 2023-09-16 17:12:14 发布

阅读量1k

点赞数 1

分类专栏：大数据之Hadoop 文章标签： hdfs hadoop 大数据

本文链接：https://blog.csdn.net/QYHuiiQ/article/details/125590450

版权

大数据之Hadoop 专栏收录该内容

58 篇文章 1 订阅 ¥49.90 ¥99.00

订阅专栏

超级会员免费看

在配置并初始化Hadoop 3.1.3集群后，启动过程中遇到错误。通过执行特定的解决方案步骤，问题得到解决，重新启动集群后正常运行。

摘要由CSDN通过智能技术生成

在对hadoop3.1.3集群初始化之后，启动集群时，报错：

[root@hadoop301 sbin]# ./start-dfs.sh
Starting namenodes on [hadoop301]
ERROR: Attempting to operate on hdfs namenode as root
ERROR: but there is no HDFS_NAMENODE_USER defined. Aborting operation.
Starting datanodes
ERROR: Attempting to operate on hdfs datanode as root
ERROR: but there is no HDFS_DATANODE_USER defined. Aborting operation.
Starting secondary namenodes [hadoop303]
ERROR: Attempting to operate on hdfs secondarynamenode as root
ERROR: but there is no HDFS_SECONDARYNAMENODE_USER defined. Aborting operation.

解决方案：

[root@hadoop301 sbin]# pwd
/usr/local/wyh/software/hadoop-3.1.3/sbin
[root@hadoop301 sbin]# vi start-dfs.sh
[root@hadoop301 sbin]# vi stop-df

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

QYHuiiQ

关注关注

1
点赞
踩
6

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
打赏
打赏
打赏举报

举报

专栏目录

订阅专栏

Hadoop【环境搭建 03】【hadoop-3.1.3 集群版】（附：集群启动&停止Shell脚本）

シ風

07-29

1265

说明搭建集群首先要进行集群的规划【哪台做主节点，哪些做从节点】，这里简单搭建一个 3 节点的 Hadoop 集群，其中三台主机均部署 DataNode 和 NodeManager 服务，但只有 hadoop001 上部署 NameNode 和 ResourceManager 服务。集群搭建跟单机版本的差别只体现在配置文件上，然后就是将文件同步给其他集群服务器。 1.前置条件【每台服务器】 Hadoop 的运行依赖 jdk 我原本安装的是 openjdk11【由于yarn报错，换回了jdk8】。 [

HBASE2.2.2+hadoop3.1.3分布式集群搭建

weixin_39338423的博客

10-29

3280

以下安装基于已经安装了JDK的前提，如果还没有安装JDK需要自行安装。注意HBASE和Hadoop之间不是所有版本都互相兼容的，需要上官网查询版本之间的兼容关系！ HBASE与Hadoop版本对应查询官网官网查询版本对比如下： Hadoop安装包下载地址 HBASE安装包下载地址本教程安装使用的Hadoop版本是：hadoop-3.1.3，HBASE版本是：hbase-2.2.2 安装Ha...

参与评论您还未登录，请先登录后发表或查看评论

Hadoop3.1.3 Hive3.1.2 启动报错

po88888的博客

03-15

3904

初始化Schema成功，bin/hive可以启动但报错，show databses报错。在hive.log中可以查看到有如下报错信息: 2022-03-15T09:24:48,812 WARN [d60a091b-11f4-4c6b-991e-7ff21f9cfc5a main] metastore.ObjectStore: datanucleus.autoStartMechanismMode is set to unsupported value null . Setting it to value

hadoop3.x.x sh start-dfs.sh启动报错

qq_42392337的博客

08-23

1789

hadoop3.x.x sh start-dfs.sh启动hdfs服务报错

Hadoop问题（一）--集群群起报waring以及无法启动:

qq_56920349的博客

12-13

1079

Hadoop问题（一）--集群群起报waring以及无法启动: 1, ERROR: Attempting to operate on hdfs namenode as root ERROR: but there is no HDFS_NAMENODE_USER defined. Aborting operation. Starting datanodes 上一次登录：三 12月 8 16:23:14 CST 2021pts/0 上 hadoop1000: datanode is running .

hadoop集群常见的报错原因

涤生大数据

12-05

5272

1）防火墙没关闭、或者没有启动yarn INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032 2）主机名称配置错误 3）ip地址配置错误 4）ssh没有配置好 5）root用户和robot两个用户启动集群不统一 6）配置文件修改不细心 7）未编译源码 Unabl

hadoop启动集群报错记录

xiaochen_hzau的博客

03-09

746

there is no HDFS_NAMENODE_USER defined. Aborting operation ERROR: JAVA_HOME is not set and could not be found hadoop集群启动出错解决方法

linux部署hadoop3.1.3

Guozr7的博客

06-26

1258

linux部署hadoop3.1.3

Hadoop 3.1.3 详细安装教程

great0220的博客

12-10

5269

Hadoop 3.1.3 详细安装教程Hadoop运行环境搭建虚拟机环境准备（三台虚拟机都要执行）配置集群（三台虚拟机都要执行） Hadoop运行环境搭建虚拟机环境准备（三台虚拟机都要执行） 1.准备三台虚拟机，虚拟机配置要求如下：（1）单台虚拟机：内存4G，硬盘50G，安装必要环境 sudo yum install -y epel-release sudo yum install -y psmisc nc net-tools rsync vim lrzsz ntp libzstd openssl-st

Hadoop集群报错处理方法

Dream_chang的博客

04-06

317

在分布式文件系统启动的时候，开始的时候会有安全模式，当分布式文件系统处于安全模式的情况下，文件系统中的内容不允许修改也不允许删除，直到安全模式结束。在实践过程中，系统启动的时候去修改和删除文件也会有安全模式不允许修改的出错提示，只需要等待一会儿即可。（1）bin/hdfs dfsadmin -safemode get （功能描述：查看安全模式状态）（1）查看当前的hdfs的blocks的状态，是否有损坏的blocks。的NameNode处在安全模式下。那什么是Hadoop的安全模式呢？

hadoop3.1.3下MapReduce操作出现错误: 找不到或无法加载主类org.apache.hadoop.mapreduce.v2.app.MRAppMaster 问题解决方法

ly_5683的博客

05-14

7366

Hadoop3.1.3下成功安装后，进行MapReduce操作出现错误：错误: 找不到或无法加载主类org.apache.hadoop.mapreduce.v2.app.MRAppMaster 解决办法： ① 在命令行下输入如下命令，并将返回的地址复制。 $ hadoop classpath /usr/local/hadoop/hadoop-3.1.3/etc/hadoop:/usr/local/hadoop/hadoop-3.1.3//share/hadoop/common/lib/*:/usr/loc

[hadoop] ERROR: but there is no HDFS_NAMENODE_USER defined. Aborting operation. Starting datanodes

qq_44172732的博客

02-20

1443

在启动hadoop后，查看jps时看不到应该启动起来的东西其中一个问题是报but there is no HDFS_NAMENODE_USER defined. Aborting operation. Starting datanodes 直接解决在Hadoop安装目录下找到sbin文件夹在里面修改四个文件 1、对于start-dfs.sh和stop-dfs.sh文件，添加下列参数： #!/...

在配置hadoop3.1.3中出现的错误DataNode不能启动

joey_ro的博客

11-17

1607

原因多次进行格式化导致各个节点之间的版本号不同，集群不能正常启动。当在NameNode中使用了格式化 hdfs namenode -formar 导致NameNode的版本号发生变化。当我们使用hadoop namenode -format格式化namenode时，会在namenode数据文件夹（这个文件夹为自己配置文件中dfs.name.dir的路径）中保存一个current/VERSION文件，记录clusterID，datanode中保存的current/VERSION文件中的clustre

hadoop-3.1.3启动HDFS时报错ERROR Attempting to operate on hdfs namenode as root的解决方法

emgexgb_sef的博客

04-18

3248

今天在使用hadoop时遇到了下面这个问题，看报错信息是用户问题，于是上网查了下解决方案，找到两种方式，我使用的是方法1，下面将两种方式都列给大家参考。报错场景： hadoop-3.1.3启动HDFS时报错，具体错误信息如下： [root@hadoop10 hadoop-3.1.3]# sbin/start-dfs.sh Starting namenodes on [hadoop10] ERROR: Attempting to operate on hdfs namenode as root ERROR

解决ERROR: Attempting to operate on hdfs namenode as root