Hadoop集群搭建详解以及安装包下载

本文详述了Hadoop集群的搭建步骤,包括虚拟机配置、SSH免密登录、JDK安装、Hadoop解压及环境配置,以及启动HDFS和YARN的过程。关键操作包括关闭防火墙、配置JAVA_HOME、核心站点、HDFS站点、YARN站点和slaves文件,最后通过scp命令同步配置到所有节点。
摘要由CSDN通过智能技术生成

1.创建一台虚拟机,并且克隆两台,并且配置好/etc/hosts文件的ip映射,克隆在我前面的博客里面有详细步骤。
这里写图片描述
如果搭建过程不成功有可能是防火墙的问题,关闭防火墙,重启就OK //chkconfig iptables off
2.将集群通信搭好,前面的文章里面也有,现在有一个简单的方法
(1)安装ssh客户端
(2)到这个里面有个安装脚本,运行一下就OK,注意自己的密码ssh免密登录运行脚本,实在不行就看我前面的文章里面搭
3.jdk安装,
(1):把文件上传到linux
(2):解压文件到安装目录 tar -zxvf /root/jdk-8u102-linux-x64.tar.gz -C /usr/local/
(3):配置环境变量 vi /etc/profile

 export JAVA_HOME=/usr/local/jdk1.8.0_102
 export PATH=$PATH:$JAVA_HOME/bin

(5)让其生效,看看安装上没:source /etc/profile
4.hadoop的解压
上传HADOOP安装包
 规划安装目录 /usr/local/hadoop-2.8.3
 解压安装包,也解压到和jdk一个目录,方便去管理
链接:https://pan.baidu.com/s/1z5oDp8gkCBnNtemn9i4tEg 密码:ju6x
5.开始配置hadoop-env.sh //配置JAVA_HOME
(1)cd /usr/local/hadoop-2

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值