阿里云安装 Hadoop 更新

更新

1.core-site.xml

<configuration>
    <!-- 指定HDFS中NameNode的地址 -->
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://172.18.125.63:9000</value>
    </property>
    <!-- 指定hadoop临时目录 -->
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/hadoop/tmp</value>
    </property>
</configuration>

2.hdfs-site.xml

<configuration>
    <!--<property>
        <name>fs.default.name</name>
        <value>localhost:9000</value>
    </property>
    <property>
        <name>mapred.job.tracker</name>
        <value>localhost:9001</value>
    </property>-->

    <!--官网只配了replication-->
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    <!-- 访问不需要权限 -->
    <property>
        <name>dfs.permissions</name>
        <value>false</value>
        <final>true</final>
    </property>
    <!-- 如果是通过公网IP访问阿里云上内网搭建的集群 -->
    <property>
        <name>dfs.client.use.datanode.hostname</name>
        <value>true</value>
        <description>only cofig in clients</description>
    </property>
    <!--namenode和datanode的路径-->
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>file:///hadoop/tmp/dfs/name</value>
    </property>
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>file:///hadoop/tmp/dfs/data</value>
    </property>

    <!--指定可以通过web访问hdfs目录-->       
    <!--<property>
        <name>dfs.webhdfs.enabled</name>
        <value>true</value>
    </property>--> 
    <!-- 启用了50070的端口访问 -->
    <!-- 3.3版本启用了9870的端口访问 -->
    <!--<property>
        <name>dfs.namenode.http.address</name>
        <value>slave1:9870</value>
    </property>-->
</configuration>