1.首先下载jdk,并配置jdk环境,这里我下的是1.8
2.下载hadoop,配置环境
环境的配置,在~/.bashrc 中:
export JAVA_HOME=/home/ysh/file/jdk1.8.0_181
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=.:$CLASSPATH:$JAVA_HOME/lib:$JRE_HOME/lib
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin
export HADOOP_HOME=/usr/local/hadoop
export CLASSPATH=$($HADOOP_HOME/bin/hadoop classpath):$CLASSPATH
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
记得source ~/.bashrc
伪分布式的配置网上都有了,如何修改文件都比较简单,这里出现两个问题,及解决办法
第一次运行时可能出错 如找不到java环境和native相关的报错,虽然在bashrc中添加了路径,这里需要在hadoop/etc/hadoop/hadoop-env.sh 添加java路径和native库:
export JAVA_HOME=/home/ysh/file/jdk1.8.0_181
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=.:$CLASSPATH:$JAVA_HOME/lib:$JRE_HOME/lib
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin
export HADOOP_OPTS="-Djava.library.path=${HADOOP_HOME}/lib/native"