Hadoop历险记(二 环境搭建和集群安装)

这里因为是个人的学习记录,而不是详细的教程。所以很多具体的过程我就不多赘述了。

要学习hadoop,那么大家要有基础的多机器+linux环境。
所以需要准备的是:

  • 安装VM虚拟机,设置好本机的虚拟网卡 便于和虚拟机进行网络通信

  • 安装三个linux系统 在虚拟机上面来模仿集群的三台机器(这里大家可以搜索百度自己学着装,也可以去搜免费教程里面的现场的虚拟机vmx直接导入现成的linux系统)

  • 在之前的环境上面 安装hadoop(集群安装)

这里有几个踩过的坑需要提醒大家

  • 强烈建议大家安装finalshell远程连接操作虚拟机里的linux系统 这样会方便很多

  • win11的虚拟网卡刚开始是空的 在VM里面安装有时候也会失败,解决方法是这一篇https://blog.csdn.net/Young_Harry/article/details/123252641

  • linux基础环境安装的时候记得屏蔽防火墙。有时候屏蔽没成功记得输入命令确认一下:
    在这里插入图片描述

  • 机器之间的ssh免密登录和时间同步 按照百度教程搞就好了 很简单

  • 很多初学者接触hadoop之前是没学过java的,因为hadoop是java写的所以搭建环境的时候 linux上面记得先装jdk 然后配好环境变量


这里记录一个细节 就是大概了解一下hadoop安装包的目录结构,心里大概知道那一片是干什么的:
在这里插入图片描述


具体的安装过程 网上详细的教程很多我这里就不赘述了。总之推荐大家手把手自己搭一编hadoop框架,在工作中都是运维搭好的 我们最基本没有这种亲自动手的机会

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值