hadoop安装对应配置文件

名称: core-site.xml

<configuration>
  <property>
    <!-- HDFS namenode地址 -->  
    <name>fs.defaultFS</name>
    <value>hdfs://gree139:9000</value>
  </property>
  <property>
    <!-- HADOOP 运行时存储路径 -->  
    <name>hadoop.tmp.dir</name>
    <value>/opt/soft/hadoop260/hadooptmp</value>
  </property>
  <property>
    <name>hadoop.proxyuser.root.hosts</name>
    <value>*</value>
  </property>
  <property>
    <name>hadoop.proxyuser.root.groups</name>
    <value>*</value>
  </property>
</configuration>

名称: hdfs-site.xml

<configuration>
  <property>
    <!-- 设置hadoop存储文件的复本数,默认3份 -->
    <name>dfs.replication</name>
    <value>3</value>
  </property>
  <property>
    <!-- secondary设置 -->
    <name>dfs.namenode.secondary.http-address</name>
    <value>gree139:50090</value>
  </property>
</configuration>

名称: mapred-site.xml

<configuration>
  <property>
    <!-- mapreduce执行计算时,使用的资源调度框架为Yarn -->
    <name>mapreduce.framework.name</name>
    <value>yarn</value>
  </property>
  <property>
    <name>mapreduce.jobhistory.address</name>
    <value>gree139:10020</value>
  </property>
  <property>
    <name>mapreduce.jobhistory.webapp.address</name>
    <value>gree139:19888</value>
  </property>
</configuration>

名称: yarn-site.xml

<configuration>

<!-- Site specific YARN configuration properties -->

  <property>
    <!-- reducer获取数据的方式 -->
    <name>yarn.nodemanager.aux-services</name>
    <value>mapreduce_shuffle</value>
  </property>
  <property>
    <name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
    <value>org.apache.hadoop.mapred.ShuffleHandler</value>
  </property>
  <property>
    <!-- 指定YARN的resourceManager的地址 -->
    <name>yarn.resourcemanager.hostname</name>
    <value>gree139</value>
  </property>
  <property>
    <!-- 日志聚集功能 -->
    <name>yarn.log-aggregation-enable</name>
    <value>true</value>
  </property>
  <property>
    <!-- 设置日志记录保留天数为7天 -->
    <name>yarn.log-aggregation.retain-seconds</name>
    <value>604800</value>
  </property>
  
</configuration>

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值