hadoop3.x.x sh start-dfs.sh启动报错

已于 2022-08-23 16:10:23 修改
阅读量1.5k 收藏
点赞数
分类专栏： hadoop 文章标签： hadoop 大数据
于 2022-08-23 16:09:41 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42392337/article/details/126487047
版权

hadoop3.x.x sh start-dfs.sh启动报错

报错信息：

/app/module/hadoop310/libexec/hadoop-functions.sh: line 398: syntax error near unexpected token `<'
/app/module/hadoop310/libexec/hadoop-functions.sh: line 398: `  done < <(for text in "${input[@]}"; do'
/app/module/hadoop310/libexec/hadoop-config.sh: line 70: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 87: hadoop_bootstrap: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 104: hadoop_parse_args: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 105: shift: : numeric argument required
/app/module/hadoop310/libexec/hadoop-config.sh: line 110: hadoop_find_confdir: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 111: hadoop_exec_hadoopenv: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 112: hadoop_import_shellprofiles: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 113: hadoop_exec_userfuncs: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 119: hadoop_exec_user_hadoopenv: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 120: hadoop_verify_confdir: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 122: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 123: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 124: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 129: hadoop_os_tricks: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 131: hadoop_java_setup: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 133: hadoop_basic_init: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 36: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 38: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 40: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 42: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 44: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 46: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 48: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 50: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 52: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 54: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 62: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/yarn-config.sh: line 64: hadoop_deprecate_envvar: command not found
/app/module/hadoop310/libexec/hadoop-config.sh: line 140: hadoop_shellprofiles_init: command not found

报错具体原因暂未排查出来
解决方案： 切换到hadoop目录 直接直接脚步
cd /app/module/hadoop310
./sbin/start-dfs.sh

JasonZ_1
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
启动hadoop3.1.3集群报错
QYHuiiQ
07-03 876
在对hadoop3.1.3集群初始化之后，启动集群时，报错： 解决方案： 然后重新启动集群即可。
Hadoop2.x安装共25页.pdf.zip
11-21
9. **启动与停止Hadoop**：使用`start-dfs.sh`和`start-yarn.sh`命令启动Hadoop服务，`stop-dfs.sh`和`stop-yarn.sh`用于停止。还可以通过`jps`检查各进程是否正常运行。 10. **测试Hadoop**：通过`hadoop fs -ls /...
Hadoop 的sbin/start-dfs.sh 启动 报错
qq_26430717的博客
11-28 6257
HADOOP 命令sbin/start-dfs.sh 启动 报错 Error: Cannot find configuration directory: /etc/hadoop JAVA_HME is not set and could not be found 配置hadoop-env.sh 文件位置为 hadoop-2.7.1/etc/hadoop。文件路径写你自己的jdk 和hadoop路径。 export JAVA_HOME=/usr/jdk1.8.0_221 export H...
./start-dfs.sh 启动错误 ERROR: Cannot set priority of datanode process xxxxx
热门推荐
记录点点滴滴
11-12 1万+
ERROR: Cannot set priority of datanode process xxxx错误现象解决方案 错误现象 [root@cpucode100 sbin]# ./start-dfs.sh Starting namenodes on [cpucode100] Last login: Fri Nov 12 21:00:56 CST 2021 on pts/0 Starting datanodes Last login: Fri Nov 12 21:07:43 CST 2021 on pts
hadoop install start-dfs.sh 失败
weixin_34049032的博客
07-25 304
linux：ubuntu 16.04 LTS hadoop version: 2.7.3 JDK: java-9-open-jdk issue: start-dfs.sh start-dfs.sh:command not found 在hadoop sbin目录下可以找到这个文件。但是run不起来。 解决方法： 1. 打开$HOME/.bashrc加入下面一行。 PAT...
mac nacos 1.2.1 start.sh 启动失败
virgil
12-01 565
下载部署的zip包，解压后启动 记得要在 bin 目录下 sudo sh start.sh -m standalone 启动失败，失败信息如下： start.out /Library/Internet Plug-Ins/JavaAppletPlugin.plugin/Contents/Home/bin/java -Xms512m -Xmx512m -Xmn256m -Dnacos.standalone=true -Djava.ext.dirs=/Library/Internet Plug-Ins/Jav
linux 环境下 xx.sh 脚本无法正常启动 \r\n 问题解决
告水南木
12-08 1万+
原因是 windows 下的换行符是 \r\n，而 linux 下的换行符是 \n 1、第一种解决方案： 首先 安装 dos2unix yum install dos2unix -y 第一步 ：chmod +x startBatch.sh 第二步 ：你只要输入dos2unix startBatch.sh startBatch.sh就是脚本文件名 第三步：启动./startBatch.sh & 意思是关闭页面，后台运行 就完美运行成功！ 2、进入脚本执行命令 在可编程模式下输入 .
hadoop.2.7.x.zip
06-05
5. **启动服务**: 运行 `start-dfs.sh` 和 `start-yarn.sh` 启动 Hadoop 的各个服务。 6. **测试运行**: 使用 `hadoop fs -ls` 或 `hadoop dfs -put` 命令检查 Hadoop 是否正确安装和运行。 在 Windows 上运行 ...
Hadoop 2.x伪分布式环境搭建详细步骤
09-10
在本教程中，我们将深入探讨如何在本地计算机上搭建Hadoop 2.x的伪分布式环境。伪分布式环境意味着所有Hadoop服务都在同一台机器上运行，但模拟的是一个分布式的集群环境，这对于学习和测试Hadoop功能非常有用。 ...
hadoop 2.X 伪分布式配置文件
07-25
6. **启动与停止服务**：在伪分布式环境下，使用`start-dfs.sh`和`start-yarn.sh`脚本启动Hadoop服务，用`stop-dfs.sh`和`stop-yarn.sh`关闭服务。 7. **安全性**：虽然默认情况下伪分布式环境不开启安全模式，但...
hadoop 2.x 版本概要讲解，HA搭建指南
最新发布
06-24
启动 HDFS 和 YARN 有多种方式，可以通过命令行脚本（如 `start-dfs.sh` 和 `start-yarn.sh`）或者使用 Hadoop 自带的守护进程控制工具（如 `mr-jobhistory-daemon.sh` 和 `start-all.sh`）来完成。不同的启动方式...
Hadoop: command not found，控制台中hadoop命令无法找到或无法直接运行。彻底解决办法：在系统中添加环境变量
Tesla的博客
03-17 2164
Hadoop: command not found，控制台中hadoop命令无法找到或无法直接运行。彻底解决办法：在系统中添加环境变量。
【Hadoop】执行start-dfs.sh启动hadoop集群时，datenode没有启动怎么办
m0_60511809的博客
12-15 2339
执行start-dfs.sh后，datenode没有启动，很大一部分原因是因为在第一次格式化dfs后又重新执行了格式化命令（hdfs namenode -format)，这时主节点namenode的clusterID会重新生成，而从节点datanode的clusterID 保持不变。打开name目录中current下面的VERSION文件，然后用这个clusterID替换掉datanode节点上的data/current/VERSION里的clusterID。
启动hadoop服务报错
泊涯
09-15 478
集群部署完hadoop和spark后，启动hadoop集群报如下错误：上一次登录：五 9月 15 15:32:56 CST 2023pts/0 上/home/bigdata/hadoop/libexec/hadoop-functions.sh:行398: 未预期的符号 `<' 附近有语法错误/home/bigdata/hadoop/libexec/hadoop-functions.sh:行398: ` done < <(for text in "${input[@]}";do'
HDFS EXERCISES
BIT_mk的博客
03-17 555
是一个在Linux和Unix系统中用于Bash shell的配置文件。当你启动一个新的终端会话时，或者在命令行中启动一个新的Bash实例时，该文件会被自动读取并执行。文件中包含的命令用于配置终端会话的。符号，它告诉 shell 去获取与紧随其后的文字对应的变量的值。在 Bash 和其他类 Unix 操作系统的 shell 中，符号用于访问变量的值。这可能是因为hdfs命令不在系统环境变量中。目录添加到PATH环境变量中。我们可以手动启动datanode。当你定义了一个变量，比如。找到hadoop的位置。
搭建Hadoop报错汇总（那些曾经踩过的坑）
Miracle1203的博客
03-18 2641
1.-bash: hadoop: command not found 解决： 首先检查自己hadoop文件是否成功上传解压放在了指定目录下，再查看自己的/etc/profile文件下是否把HADOOP_HOME的环境变量配好了，注意文件目录是否写对。 2. ...
hadoop配置时遇到的常见问题
shenhongdb的博客
04-10 659
1.当启动hadoop时候，执行sh start-dfs.sh时报错 解决方案：将sh start-dfs.sh改成 ./start-dfs.sh即可通过。 2.当用hadoop fs -ls / 的时候出现 hadoop: command not found的问题 解决方案：环境变量设置（vim /etc/peofile 将hadoop的安装目录加入
Linux常见问题
未名
04-04 853
1.如何切换至root用户打开终端，方法1.输入：sudo     输入密码后，就进入root用户了                方法2.输入：sudo -i  输入密码，就进入root用户了。2.putty或XSehll连接linux，提示拒绝。   在乌班图系统下，常出席这种问题。因为，乌班图系统，默认的情况下，是没有安装ssh服务的。详情见：https://www.linuxidc.com...
start-dfs.sh报错
03-29
start-dfs.sh 是 Hadoop 启动脚本之一，用于启动 Hadoop 分布式文件系统（HDFS）进程。如果出现报错，可能是以下原因之一： 1. Hadoop 配置错误：检查 Hadoop 配置文件是否正确，尤其是 core-site.xml 和 hdfs-site.xml。 2. 端口占用：检查是否有其他进程使用了 Hadoop 需要的端口，可以使用 netstat 命令查看。 3. 权限问题：检查当前用户是否有足够的权限运行 Hadoop 进程，可以尝试使用 sudo 命令运行 start-dfs.sh。 4. Java 版本问题：Hadoop 需要特定版本的 Java 运行，检查 Java 版本是否满足要求。 5. 文件系统问题：检查 Hadoop 需要的数据目录是否存在，是否有足够的权限访问。 6. 第三方依赖问题：如果使用了一些第三方依赖，可能需要安装和配置相关的软件。 解决方法根据具体的报错信息进行调试和排查。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值