Hadoop -- 配置文件

core-site.xml

<configuration>
<property>
    <name>fs.defaultFS</name>
    <value>hdfs://hd1:9000</value>
</property>
<property>
    <name>hadoop.tmp.dir</name>
    <value>/opt/apps/hadoop-3.1.3/data</value>
</property>
</configuration>

hdfs-site.xml

<configuration>
<property>
   <name>dfs.namenode.name.dir</name>
   <value>/opt/apps/hadoop-3.1.3/hdfs/name</value>
</property>
<property>
    <name>dfs.datanode.data.dir</name>
    <value>/opt/apps/hadoop-3.1.3/hdfs/data</value>
</property>
<property>
    <name>dfs.replication</name>
    <value>3</value>
</property>
<property>
   <name>dfs.permissions</name>
      <value>false</value>
      </property>
      <property>
          <name>dfs.namenode.http-address</name>
              <value>hd1:50070</value>
              </property>
</configuration>

mapred-site.xml

<configuration>
<property>
       <name>mapreduce.framework.name</name>
              <value>yarn</value>
              </property>
</configuration>

yarn-site.xml

<configuration>

<!-- Site specific YARN configuration properties -->
<property>
        <name>yarn.nodemanager.aux-services</name>
              <value>mapreduce_shuffle</value>
      </property>
      <property>
              <name>yarn.resourcemanager.hostname</name>
              <value>hd1</value>
      </property>
      <property>
              <name>yarn.nodemanager.env-whitelist</name>
                      <value>JAVA_HOME,HADOOP_COMMON_HOME,HADOOP_HDFS_HOME,HADOOP_CONF_DIR,CLASSPATH_PREPEND_DISTCACHE,HADOOP_YARN_HOME,HADOOP_MAPRED_HOME</value>
      </property>
            <property>
                   <name>yarn.webapp.ui2.enable</name>
                     <value>true</value>
          </property>
           <property>
                <name>yarn.nodemanager.vmem-check-enabled</name>
                <value>false</value>
          </property>
</configuration>

使用以上配置目前能正常运行hadoop集群&hive环境。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值