hadoop常用配置文件参数设置

最新推荐文章于 2024-03-01 15:07:28 发布

asd623444055

最新推荐文章于 2024-03-01 15:07:28 发布

阅读量398

点赞数

文章标签： hadoop hdfs 大数据

本文链接：https://blog.csdn.net/asd623444055/article/details/123149587

版权

本文详细介绍了Hadoop的配置文件，包括core-site.xml、hdfs-site.xml、yarn-site.xml和mapred-site.xml的参数设置，以及workers文件的配置，旨在帮助理解Hadoop大数据集群的配置与管理。

摘要由CSDN通过智能技术生成

core-site.xml

<configuration>
    <!-- 指定NameNode的地址 -->
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://hadoop101:8020</value>
    </property>

    <!-- 指定hadoop数据的存储目录 -->
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/opt/module/hadoop-3.1.3/data</value>
    </property>

    <!-- 配置HDFS网页登录使用的静态用户为atguigu -->
    <property>
        <name>hadoop.http.staticuser.user</name>
        <value>lisi</value>
    </property>
</configuration>

hdfs-site.xml

<configuration>
    <!-- nn web端访问地址-->
    <property>
        <name>dfs.namenode.http-address</name>
        <value>hadoop101:9870</value>
    </property>
    <!-- 2nn web端访问地址-->
    <property