阿里云服务器搭建Hadoop环境以及Hive搭建

其他参见大数据开发系列（一）----Hadoop集群环境配置

1、配置阿里云服务器时，需要将所有的节点的内网、外网添加至linux的hosts文件中：

vi   /etc/hosts  ，添加：
172.22.234.35   xiaoye11
123.57.76.16   xiaoye11
172.46.54.58        xiaoye12
101.20.27.135    xiaoye12
172.30.31.16     xiaoye15
39.15.24.124    xiaoye15

2、配置阿里云服务器，只需要修改workers 文件，使用外网IP

123.57.76.16  
101.20.27.135

39.15.24.124

3、hdfs-site.xml文件配置：vim   hdfs-site.xml
vi     /usr/lib/JDK_2021/hadoop-3.1.2/etc/hadoop/hdfs-site.xml

配置阿里云服务器需要添加如下：
<property>
        <name>dfs.client.use.datanode.hostname</name>
        <value>true</value>
 </property>

4、使用主节点xiaoye11访问HDFS：
http://123.57.76.16:9870