Hadoop高可用安装

Hadoop高可用安装过程

在Hadoop安装过程中在配置虚拟机网关地址的时候一定要仔细，千万不要弄错了，不然Ping.www.baidu会ping不出来。还有本来老师给了xshell5，然后后来我想试试安装xshell6可不可以，然后之前的步骤是一直没有问题的，但是到了传输文件的时候就不能传输，然后我卸掉了xshell6安装了xshell5之后就可以了。在Hadoop安装过程中千万要做到仔细，不要拼写错误。还有相互免秘钥一定要成功不然之后的集群会启动不起来，在出错的时候，要学会查日志。还有在启动集群之后千万不要忘记关闭集群，如果电脑关机了之后集群跑不出来了，千万崩溃，再来一遍就好了，坚持坚持，很重要。

1、分发jdk到node02、03、04

scp jdk-7u67-linux-x64.rpm node02:pwd
scp jdk-7u67-linux-x64.rpm node03:pwd
scp jdk-7u67-linux-x64.rpm node04:pwd

并在Xshell的全部会话栏里一起ll，看jdk是否发送成功。

2、给node02、03、04分别安装jdk

分别在node02、03、04上执行rpm安装命令
rpm -i jdk-7u67-linux-x64.rpm

在node01上cd /etc，在此目录下把profile文件分发到node02、03、04上。
scp profile node02:pwd

利用Xshell全部会话栏，source /etc/profile
利用Xshell全部会话栏，jps，看02、03、04这三台机子的jdk是否装好。

3、同步所有服务器的时间

date查看机子当前的时间。
时间不能差太大，否则集群启动后某些进程跑不起来。
若时间不同步，
1.yum进行时间同步器的安装
yum -y install ntp




2.执行同步命令
ntpdate time1.aliyun.com 和阿里云服务器时间同步

4、装机之前的配置文件检查

1.cat /etc/sysconfig/network
查看HOSTNAME是否正确

2.cat /etc/hosts
查看IP映射是否正确，若不正确，可以改文件，也可以把node01上的用scp分发过去




3.cat /etc/sysconfig/selinux里是否出现SELINUX=disabled




4.service iptables status查看防火墙是否关闭

5、NN与其他三台机子的免秘钥设置

1.在家目录下 ll -a看下有无.ssh文件，如果没有就ssh loalhost一下（不能忘记exit）

2.cd .ssh ，并ll查看一下

3.把node01的公钥发给其他三台机子
scp id_dsa.pub node02:pwd/node01.pub node02公钥发送到哪台机子
node01的公钥重命名
scp id_dsa.pub node03:pwd/node01.pub
scp id_dsa.pub node04:pwd/node01.pub

4. 在node02的.ssh目录下ll看是否有node01.pub
如果有，那就追加到authorized_keys
cat node01.pub >> authorized_keys
并且在node01上ssh node02看是否免密钥了，千万不要忘了exit

同理给node03、04都追加一下node01.pub,也就是在node03、04的.ssh目录下执