Hadoop HA模式搭建
一 、 搭建集群
Hadoop HA模式搭建前需要完成hadoop集群配置、时区同步设置和zookeeper安装配置
二 、修改配置文件
- 1、修改hadoop01上的core-site.xml
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://ns</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/opt/hadoop/tmp</value>
</property>
<!--引入zookeeper地址-->
<property>
<name>ha.zookeeper.quorum</name>
<value>hadoop01:2181,hadoop02:2181,hadoop03:2181</value>
</property>
<property>
<name>hadoop.proxyuser.root.hosts</name>
<value>*</value>
</property>
<property>
<name>hadoop.proxyuser.root.groups</name>
<value>*</value>
</property>
<property>
<name>hadoop.native.lib</name>
<value>false</value>
<description>Should native hadoop libraries, if present, be used.
</description>
</property>
</configuration>
- 2、修改hadoop01上的hdfs-site.xml
<configuration>
<!--节点数,ha中可不配置 -->
<property>
<name>dfs.replication</name>
<value>3</value>
</property>
<!--指定名称服务,与core-site.xml中的一致 -->
<property>
<name>dfs.nameservices</name>
<value>ns</value<