首先准备好虚拟机环境,安装好系统,最好是能上外网,具体安装方法这里不详述。具体上网设置看我的另外一篇博客。
搭建前文件准备:
1.jdk1.8.0_111.tar.gz
2.hadoop-2.9.2.tar.gz
设置三台虚拟机IP和HOSTNAME(三台设置都是一样的)
192.168.135.128 hadoop01 //master这个要设置你自己的虚拟机IP
192.168.135.128 hadoop02 //slaves 这个要设置你自己的虚拟机IP
192.168.135.128 hadoop03 //slaves 这个要设置你自己的虚拟机IP
还有一个地方要修改,不然会出ssh登录还是提示需要密码:
执行一下 :hosname hadoop01
hostname 听说可以避免重启虚拟机 ,我是重启了的~~~~~~
在设置hostname后,再来设置三台电脑的ssh免密登录(需要安装sshd服务,怎么设置搜索网上有很多基本都是一样,问题不大),不然会遇到奇怪问题。防火墙什么的最好是关闭,也可以不关,下面有说设置,准备工作完成。
这些准备好后,安装jdk解压jdk1.8.0_111.tar.gz到/usr/local/目录下(当然根据自己系统情况,喜好设置这个目录,但是要记得目录)再解压hadoop-2.9.2.tar.gz到/opt/hadoop2.9.2(这个目录随自己定义但是一定要记得)然后就是配置centOS系统环境变量在/etc/profile(环境变量有多种方法,可选择其它系统文件配置)变量如下图:
文本如下:
export JAVA_HOME=/usr/local/java/jdk1.8.0_111
export JRE_HOME=/usr/local/java/jdk1.8.0_111/jre
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JRE_HOME/lib:$CLASSPATH
export MAVEN_HOME=/usr/local/apache-maven-3.5.0
export HADOOP_HOME=/opt/hadoop-2.9.2
export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib:$HADOOP_COMMON