Hadoop集群搭建知识点和添加从节点操作

本文详细介绍了如何搭建Hadoop集群,包括虚拟机配置、主机名和Host映射、关闭防火墙、安装与配置JDK和Hadoop、SSH免密登录、集群时间同步等步骤。此外,还讲解了在已有集群基础上添加从节点hadoop105的过程,以及处理可能出现的错误情况。
摘要由CSDN通过智能技术生成

1.Hadoop集群搭建知识

(具体相关搭建步骤可参考Hadoop入门(七)——Hadoop安装(图文详解步骤2021)_Leokadia Rothschild的博客-CSDN博客_hadoop 安装 这里面十分全面,我这里不做具体的操作了,而是整理集群搭建的大概所需步骤)

 

1.在虚拟机上安装centos7,先建立一台名为hadoop100的虚拟机,进行vmware虚拟网络设置、window10的地址配置、配置hadoop100的ip地址为192.168.10.102,设置主机名、host映射,最后查看网络是否能够ping通。

2.将hadoop100克隆出三台一样的虚拟机,分布为hadoop102(192.168.10.102)、hadoop103(192.168.10.103)、hadoop104(192.168.10.104)

3.对三台克隆机的主机名进行修改, vim /etc/hostname(改为hadoop100、hadoop102、hadoop103、hadoop104)

4.Host映射(3台) vim /etc/hosts

5.防火墙关闭(3台)

systemctl stop firewalld.service    #关闭防火墙

systemctl disable firewalld.service  #禁止防火墙开启自启

6.jdk的安装和配置其环境变量

(上传安装包、解压安装包)

解压jdk:tar -zxvf jdk-8u181-linux-x64.tar.gz -C /opt/module/

配置环境变量:sudo vim /etc/profile.d/my_env.sh

内容如下

#JAVA_HOME 
export JAVA_HOME=/opt/module/jdk1.8.0_212 
export PATH=$PATH:$JAVA_HOME/bin 

  • 1
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值