Hadoop集群环境搭建-集群搭建

一、Hadoop下载

hadoop官网下载地址

命令行下载具体的hadoop版本

wget https://archive.apache.org/dist/hadoop/common/hadoop-2.9.2/hadoop-2.9.2.tar.gz

二、Hadoop安装

1、解压

在安装前规划好安装目录，建议安装在 /usr/loacl/hadoop/

解压Hadoop安装包

sudo tar -zxvf hadoop-2.9.2.tar.gz

sudo mv hadoop-2.9.2/ /usr/local/hadoop

2、环境变量

sudo gedit ~/.bashrc

将下面的文本添加至~/.bashrc中，其中javahadoop都以实际目录为准。

export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64

export HADOOP_HOME=/usr/local/hadoop

export PATH=$PATH:$HADOOP_HOME/bin

export PATH=$PATH:$HADOOP_HOME/sbin

export HADOOP_MAPRED_HOME=$HADOOP_HOME

export HADOOP_COMMON_HOME=$HADOOP_HOME

export HADOOP_HDFS_HOME=$HADOOP_HOME

export YARN_HOME=$HADOOP_HOME

export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native

export HADOOP_OPTS="-DJava.library.path=$HADOOP_HOME/lib"

export JAVA_lIBRARY_PATH=$HADOOP_HOME/lib/native:$JAVA_lIBRARY_PATH

执行完上一步之后，需要将环境变量文件应用，执行下面的命令。

source ~/.bashrc</