Hadoop集群搭建

本文详细介绍了如何搭建Hadoop集群,从准备虚拟机、jdk和Hadoop压缩包开始,到安装、配置环境变量,再到核心配置文件的设置,包括core-site.xml、hdfs-site.xml、yarn-site.xml和mapred-site.xml,最后讲解了如何分发Hadoop到集群中的其他节点。
摘要由CSDN通过智能技术生成

搭建前的装备

Hadoop集群搭建前,首先你得拥有一个虚拟机、jdk压缩包、Hadoop压缩包,请自行到网上百度下载准备好即可进行Hadoop集群的搭建。

一、jdk和Hadoop的安装

在/根目录下创建一个文件夹来进行存放压缩包、数据文件等。

mkdir -p /exprot/software
mkdir -p /exprot/servers
mkdir -p /exprot/data

进入/exprot/software目录下,将jdk压缩包和Hadoop集群压缩包导入该目录下。如上传文件遇乱码,关闭重试一下。

切换目录命令如下:

cd /exprot/software
cd /exprot/servers
cd /exprot/data

上传文件命令如下:

rz -be

查看目录下文件命令如下:

ls
ll

将Hadoop压缩包和jdk压缩包导入software目录下后,再将其压缩包解压到/exprot/servers目录下,并重新命名

tar -zxvf jdk-8u141-linux-x64.tar.gz -C /exprot/servers/
tar -zxvf hadoop-2.6.4.tar.gz -C /exprot/servers/
cd /exprot/servers
ls
mv jdk1.8.0_141 jdk

二、jdk和Hadoop环

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

つ旧城孤影ღ

你的鼓励是我创作最大的动力!

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值