Hadoop的高可用模式
(个人理解)
hadoop的高可用模式就是实现hadoop的主从,主节点的namenode挂掉以后,从节点的namenode可以直接顶替master继续使用
使用三台虚拟机,名称分别为 master node1 node2
1.配置免密
3、免密钥 (远程执行命令)
在两个主节点生成密钥文件
master和node1都操作
ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
ssh-copy-id ip
master-->master,node1,node2
node1-->master,node1,node2
修改hadoop配置文件
core-site.xml,hdfs-site.xml,yarn-site.xml,mapred-site.xml
core-site.xml:
<name>fs.defaultFS</name>
<value>hdfs://cluster</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/usr/local/soft/hadoop-2.7.6/tmp</value>
</property>
<property>
<name>fs.trash.interval</name>
<value>1440</value>
</property>
<property>
<name>ha.zookeeper.quorum</name>
<value>master:2181,node1:2181,node2:2181</value>
</property>