aws上配置ec2集群用于Hadoop全分布式搭建

本文详细介绍了如何使用AWS EC2服务创建并配置3台服务器,用于搭建Hadoop全分布式集群。步骤包括购买VM实例、设置Security Groups端口、分配Elastic IPs、配置hosts和hostname以及实现SSH无密登录。
摘要由CSDN通过智能技术生成


前言

本片文章主要记录如何在aws上准备3台服务器用来搭建Hadoop集群。


准备工作:

一个AWS账号即可


虚拟机设置:

VM实例的购买:

  1. 登录AWS后点EC2, 选择Instances, 然后点Launch Instances 就开始购买
  2. 创建3个虚拟机实例,根据需要选择配置,如果是初学者其实给他free trail 也基本够用了,
  3. 创建安全组 security group 命名为Hadoop
  4. 记得保存 .pem 文件
    购买以后在Instances那儿会出现三个正在初始化的实例,我们可以给他们命名以防以后搞错
    在这里插入图片描述

Security Groups 端口设置

暂时先开发4个端口,以后根据需要再加:
22: ftp 端口
9870: hdfs端口
8088:yarn端口

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值