Hadoop集群start-dfs.sh错误解决方式

最新推荐文章于 2025-03-24 21:42:46 发布

阳光里哭泣的狗

最新推荐文章于 2025-03-24 21:42:46 发布

阅读量2.2w

点赞数 19

分类专栏： hadoop 文章标签： hadoop linux 大数据 spark hdfs

本文链接：https://blog.csdn.net/qq_43659234/article/details/108670050

版权

hadoop 专栏收录该内容

22 篇文章

订阅专栏

解决方式

在你解压的hadoop文件中的sbin文件中
vi进去并编辑start-dfs.sh与stop-dfs.sh

HDFS_DATANODE_USER=root
HDFS_DATANODE_SECURE_USER=hdfs 
HDFS_NAMENODE_USER=root 
HDFS_SECONDARYNAMENODE_USER=root

在这里插入图片描述
vi进去并编辑start-yarn.sh与stop-yarn.sh

YARN_RESOURCEMANAGER_USER=root
HADOOP_SECURE_DN_USER=yarn
YARN_NODEMANAGER_USER=root

在这里插入图片描述
再次重启dfs和yarn

在这里插入图片描述

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

阳光里哭泣的狗

关注关注

19
点赞
踩
70

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

【Hadoop】执行start-dfs.sh出错

放心飞吧

02-26

8849

问题1：hadoop2.7.3部署警告： Unable to load native-hadoop library for your platform 该警告通过如下方法消除了： dream361@ubuntu:/usr/local/hadoop/sbin$ vim /usr/local/hadoop/etc/hadoop/hadoop-env.sh 修改HADOOP_OPTS： expor

问题:sbin/start-dfs.sh 启动不了zookeeper,zkfc和datenode

N8062288的博客

09-23

3711

问题一:zookeeper服务启动成功，但是就不显示端口号，未运行，配置也正确，就是不知道什么原因运行zookeeperd后显示启动成功： JMX enabled by default Using config: /data/programfiles/zookeeper-3.4.5/bin/../conf/zoo.cfg Starting zookeeper ... STARTED 但用zk...

参与评论您还未登录，请先登录后发表或查看评论

Hadoop集群搭建（hdfs、yarn）

最新发布

majunssz的博客

03-24

974

Hadoop 是 Apache 软件基金会旗下的一个开源项目，是用于处理大数据的分布式系统基础架构，被广泛应用于大数据存储、处理和分析等场景。

笔记hadoop的master执行start-dfs.sh报错

ask_baidu的博客

12-31

1429

hadoop的master执行start-dfs.sh报错

Hadoop 的sbin/start-dfs.sh 启动报错

qq_26430717的博客

11-28

7074

HADOOP 命令sbin/start-dfs.sh 启动报错 Error: Cannot find configuration directory: /etc/hadoop JAVA_HME is not set and could not be found 配置hadoop-env.sh 文件位置为 hadoop-2.7.1/etc/hadoop。文件路径写你自己的jdk 和hadoop路径。 export JAVA_HOME=/usr/jdk1.8.0_221 export H...

执行start-dfs.sh时出现错误：there is no HDFS_NAMENODE_USER defined.

lijun05的博客

05-17

2869

完全分布式安装Hadoop时，在执行start-dfs.sh时出现一下错误： [root@hdp1 hadoop]# start-dfs.sh Starting namenodes on [hdp1] ERROR: Attempting to operate on hdfs namenode as root ERROR: but there is no HDFS_NAMENODE_USER defined. Aborting operation. Starting datanodes ERROR: Atte

hadoop install start-dfs.sh 失败

weixin_34049032的博客

07-25

368

linux：ubuntu 16.04 LTS hadoop version: 2.7.3 JDK: java-9-open-jdk issue: start-dfs.sh start-dfs.sh:command not found 在hadoop sbin目录下可以找到这个文件。但是run不起来。解决方法： 1. 打开$HOME/.bashrc加入下面一行。 PAT...

hadoop start-dfs.sh java_home问题

qq_43395671的博客

04-13

2434

centos 7 hadoop 3 hadoop-env.sh 增加了JAVA_HOME export JAVA_HOME=/usr/java/jdk1.8.0_202-amd64 在start-dfs.sh报错，JAVA_HOME is not set and could not be found 找了很多文章都无果，看了【hadoop】/sbin/start-dfs.sh Error: JAVA_HOME is not set and could not be found._CGD_Pr

执行start-dfs.sh后，datenode没有启动的最全解决办法（全网最全）

小白的大数据之旅的博客

08-13

1930

在Hadoop中申请一个Flink的Session会话的时候出现了报错报错内容看到说没有找到datanode,然后我就去检查了一下进程，发现确实没有看到datanode，在使用start-dfs.sh的时候，datanode没有启动。

hadoop插件apache-hadoop-3.1.0-winutils-master.zip

12-17

5. **启动Hadoop服务**：通过`sbin`目录下的脚本启动Hadoop的各个服务，如`start-dfs.sh`启动HDFS，`start-yarn.sh`启动YARN。 6. **Hadoop命令**：现在可以通过`hadoop fs`或`hadoop dfs`命令与HDFS交互，进行文件...

解决hadoop高可用使用start-dfs.sh脚本启动时namenode启动不了的问题

weixin_52918377的博客

05-13

4031

解决hadoop高可用，脚本启动时namenode启动不了的问题在通过使用hadoop提供的脚本 sbin/start-dfs.sh 启动hdfs时，经常发现高可用的namenode之启动了一个查看错误日志发现 STARTUP_MSG: Starting NameNode STARTUP_MSG: host = hdp14/192.168.204.14 STARTUP_MSG: args = [] STARTUP_MSG: version = 3.1.4 STARTUP_MSG: cla

hadoop-3.1.3.tar.gz

12-06

启动Hadoop集群，可以依次执行以下命令： ``` start-dfs.sh start-yarn.sh ``` 七、验证Hadoop安装启动成功后，可以通过访问http://localhost:50070查看NameNode的状态，http://localhost:8088查看ResourceManager...

linux 输入start-dfs.sh后报错： Starting namenodes on [localhost] ERROR: Attempting to operate on hdfs name

qq_59812342的博客

02-20

3216

linuxECS启动hadoop服务。输入start-dfs.sh后报错。

Hadoop start-dfs.sh失败

weixin_44403589的博客

01-08

2156

在启动HDFS的时候显示找不到路径或目录我的Java变量如下： hadoop.env-sh：启动的时候 java 路径里面的多了 /user/hadoop/ ，不知道是怎么回事。有没有大佬能帮忙解决下 ...

Hadoop-2.2.0启动./start-dfs.sh报错解决方法

热门推荐

遥望星河，飞向太空

07-17

2万+

原博文地址: http://shisiyou.blog.51cto.com/9864147/1608060 绝对真实可用问题描述：开启Hadoop-2.2.0时，出现如下信息： [root@hd-m1 /]# ./hadoop/hadoop-2.6.0/sbin/start-all.sh This script is Deprecated. Instead use

安装hadoop2.4.0遇到的问题

weixin_30840253的博客

06-19

271

一、执行start-dfs.sh后，datenode没有启动　　查看日志如下：　　 2014-06-18 20:34:59,622 FATAL org.apache.hadoop.hdfs.server.datanode.DataNode: Initialization failed for block pool Block pool <registering> (Data...

Hadoop安装启动start-dfs.sh 出现pdsh localhost Connection refused

qq_36470898的博客

01-13

1871

本地安装hadoop单机模式的时候需要启动namenode。我使用的是hadoop 3.2，配置文件如下： site-core.xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000&...

已解决：start-dfs.sh时出现Could not resolve hostname fix: Name or service not known

qq_43413373的博客

04-16

521

参考：https://blog.csdn.net/l1028386804/article/details/51538611

./sbin/start-dfs.sh出错java home

12-04

当您看到`./sbin/start-dfs.sh`命令启动Hadoop分布式文件系统 (HDFS) 时遇到错误，提到`java home`，通常意味着脚本无法找到JDK（Java Development Kit）的安装路径。Hadoop需要Java运行环境来启动服务。这个错误可能是由于以下几个原因： 1. **JAVA_HOME环境变量未设置**：检查您的系统环境变量，确保`JAVA_HOME`指向了正确的JDK目录。如果没有设置，可以添加如下到bashrc或zshrc文件中： ``` export JAVA_HOME=/path/to/your/java/jdk ``` 2. **JAVA_HOME路径错误**：如果`JAVA_HOME`已经设置，确认它的路径是否指向存在的JDK安装位置。 3. **Hadoop配置文件问题**：在`core-site.xml`或其他相关的Hadoop配置文件中，可能会指定JDK的路径。检查这部分配置是否正确。 4. **权限问题**：确保当前用户有执行`start-dfs.sh`脚本所需的权限。 5. **Hadoop版本和JDK兼容性**：确保使用的Hadoop版本与所依赖的JDK版本兼容。