linux搭建hadoop集群全网最啰嗦教程

重新安装三个全新centos7.9并选择一台主机进行以下操作(如果没有镜像可到以下网址下载或找人拷贝)

镜像地址:centos-7.9.2009-isos-x86_64安装包下载_开源镜像站-阿里云

注意:在进行以下步骤之前尽量保证自己的虚拟机ip是静态IP
需准备的软件(压缩包)

以下内容可通过官网下载

jdk:Java Downloads | Oracle 中国

hadoop:Apache Hadoop

百度云自取:
链接:https://pan.baidu.com/s/1ViE0D_pkQLvrUP-hs34LOg?pwd=gq01 
提取码:gq01

  • jdk-8u181-linux-x64.tar.gz
    hadoop-3.2.4.tar.gz
    • 在根目录下创建一个存放路径(此处以bigdata为例)

      mkdir /bigdata

  • 上传jdk-8u181-linux-x64.tar.g和hadoop-3.2.4.tar.gz 至home目录,并解压缩至bigdata目录

    tar -zxvf jdk-8u181-linux-x64.tar.gz -C /bigdata
    tar -zxvf hadoop-3.2.4.tar.gz -C /bigdata

  • 配置jdk环境变量
    
    vi /etc/profile
    #(默认解压的文件名可能不是jdk8,必须选择其一改之,要么将解压的文件名改为jdk8,要么将解压出来的名字替换此处的jdk8)
    export JAVA_HOME=/bigdata/jdk8
    export PATH=$PATH:$JAVA_HOME/bin
    export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
    #运行下述命令让文件生效
    source /etc/profile
     
  • 查看hadoop版本

      
     cd /bigdata/hadoop-3.2.4/bin
       
         ./hadoop version
        #Hadoop 3.2.4
        #.....
        # 、、、、、

  • 配置hadoop环境变量

    vi /etc/profile
      #将如下内容粘贴进profile中
      export HADOOP_HOME=/bigdata/hadoop-3.2.4
      export PATH=$PATH:$HADOOP_HOME/bin
      #运行下述命令让文件生效
      source /etc/profile
      #测试hadoop
      hadoop version
    #Hadoop 3.2.4
    #Source code repository Unknown -r Unknown
    #Compiled by root on 2024-08-13T02:32Z
    #Compiled with protoc 2.5.0
    #From source with checksum ee031c16fe785bbb35252c749418712
    #This command was run using /bigdata/hadoop-3.2.4/share/hadoop/common/hadoop-common-3.2.4.jar(出现版本号即为成功)

  • 关闭防火墙

     #关闭防火墙
      systemctl stop firewalld.service 
      #禁用防火墙,防止虚拟机重启后防火墙自动开启
      systemctl disable firewalld.service 
      #查看防火墙状态
      systemctl status firewalld.service 

  • 关闭 SELINUX</

  • 11
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值