hadoop 2.7.3部署配置文件记录

本文档详细记录了在3台CentOS 7.2上部署Hadoop 2.7.3的过程,包括规划、环境配置、各节点设置、配置core-site.xml、hdfs-site.xml、yarn-site.xml、mapred-site.xml,以及启动步骤。重点关注了DFS块大小设置、主机访问控制和JAVA_HOME等关键配置。
摘要由CSDN通过智能技术生成

brief of 步骤
规划:3台centos7.2,暂时不设置HA
1. ssh已经配置好
2. 解压到hadoop用户下,改名字(去掉版本号)
3. 配置环境变量

、、、、、、、、、、、、、、、、、、、、、、
nn节点:
hadoop_home
yarn_home
hadoop_user_name
、、、、、、、、、、、、、、、、、、、、、、
dn节点:
hadoop_log_dir
yarn_log_dir

4 .配置core-site.xml
这里比官网多一个tmp目录的配置

        <!-- 指定hdfs的nameservice为namenode -->
        <property>
                <name>fs.defaultFS</name>
                <value>hdfs://namenode:9000</value>
        </property>
        <!-- Size of read/write buffer used in SequenceFiles. -->
        <property>
         <name>io.file.buffer.size</name>
         <value>131072</value>
       </property>
        <!-- 指定hadoop临时目录,自行创建 -->
        <property>
                <name>hadoop.tmp.dir</
  • 2
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值