Hadoop 伪分布式配置

 

1.首先下载jdk，并配置jdk环境，这里我下的是1.8

2.下载hadoop，配置环境

环境的配置，在~/.bashrc 中：

export JAVA_HOME=/home/ysh/file/jdk1.8.0_181
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=.:$CLASSPATH:$JAVA_HOME/lib:$JRE_HOME/lib
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin

export HADOOP_HOME=/usr/local/hadoop
export CLASSPATH=$($HADOOP_HOME/bin/hadoop classpath):$CLASSPATH
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

记得source  ~/.bashrc

伪分布式的配置网上都有了，如何修改文件都比较简单，这里出现两个问题，及解决办法

第一次运行时可能出错 如找不到java环境和native相关的报错，虽然在bashrc中添加了路径，这里需要在hadoop/etc/hadoop/hadoop-env.sh 添加java路径和native库：

export JAVA_HOME=/home/ysh/file/jdk1.8.0_181
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=.:$CLASSPATH:$JAVA_HOME/lib:$JRE_HOME/lib
export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin

export HADOOP_OPTS="-Djava.library.path=${HADOOP_HOME}/lib/native"  

 转https://blog.csdn.net/young_kim1/article/details/50324345

      https://www.cnblogs.com/codeOfLife/p/5940642.html