三:虚拟机,jdk,hadoop配置

1.环境选定:centos7,三节点,内存8-3-3,硬盘主节点大于50G,其他的最好也是几十G,网络nat模式,固定ip,测试是否ping通互联网。

2.组件版本,apache版本,虽然麻烦,但是cdh收费之后,有实力的地方绝对是自己搭建apache。

3.hadoop搭建:

在这里插入图片描述

  • 主节点和其余两节点都在opt下mkdir module和software用于存放和安装,然后安装jdk-8u144-linux-x64。
  • 然后在主节点,opt/software拷贝压缩包,解压到opt/module,
    然后配置环境变量:vim /etc/profile.d/env.sh,这里不是简单在profile文件里面配置
  • 然后配置etc/hadoop下的配置文件:
    在这里插入图片描述vim core-site.xml 命令,然后core-site.xml配置文件如下:
    在这里插入图片描述
  • 配置hadoo-env.sh,把里面的jdk目录{jdk_home}换成自己的
  • 配置hdfs-site.xml:
    在这里插入图片描述
  • 配置yarn-env.sh:把里面的jdk目录{jdk_home}换成自己的
  • 配置yarn-site.xml:
    在这里插入图片描述
  • 配置mapred-env.sh: 把里面的jdk目录{jdk_home}换成自己的
  • 配置mapred-site.xml:
    在这里插入图片描述
  • 修改slaves:
    在这里插入图片描述
    回到 /opt/module:指定分发脚本xsync.
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值