这几天忙就一直没有更新实验进展,之前有一个报错,很经典,我找了很多网上的教程,但就是没有解决我的问题,后来是灵光一现,把问题给解决了
报错的截图:
这个报错的意思是,我运行的yarn-deamo.sh start resourcemanager这个命令已经不用了,要用yarn --deamon start 这个命令,并且它找不到/opt/software/jdk1.8.0_144//libexec/yarn-config.sh这个文件
我的判断思路是,先解决找不到这个yarn-config.sh这个文件,然后再运行上面的命令。然后这个报错,应该是环境变量配置错了,它找不到这个路径。
刚开始我不知道是哪一个环境变量配置错了,因为有好几配置文件,上一个文章写得就有好几个配置文件,我就一个排查一个个试,最终还是觉得是linux的配置文件配错了。
把配置文件改成这样的,运行yarn --daemon start就没有什么问题了
#HADOOP_HOME
export HADOOP_HOME=/opt/software/hadoop-3.3.0
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_YARN_HOME=$HADOOP_HOME
export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/libex
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/libex"
#JAVA_HOME
export JAVA_HOME=/opt/software/jdk1.8.0_144
export PATH=$PATH:$JAVA_HOME/bin
export JRE_HOME=$PATH:${JAVA_HOME}/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOOME/sbin:$HADOOP_HOME/lib:$HADOOP_HOME/libex
最后成功的截图