spark01、快速使用之spark环境设置:基于物理机centos7环境搭建分布式集群

本文详述了如何在物理机CentOS7环境下,通过vmware15配置网络,安装虚拟机,设置基础环境,克隆主机并配置SSH无秘访问,最终建立Spark分布式集群。包括网络配置、虚拟机安装、基础环境搭建、主机名与IP映射、SSH密钥分发及普通用户授权等步骤。
摘要由CSDN通过智能技术生成

1、配置vmware15网络

Edit-Virtual Network Editor 找到使用nat的那块虚拟网卡:

  • 配置网段:192.168.10.0/255.255.255.0
  • 配置NAT Settings网关:192.168.10.1

 

 

2、配置对应VMNAT的网卡地址

  • 选中网卡点连接
  • 以太网右上脚选中+号,增加一个网卡配置

  • 在新增加的网卡里,取个名称VM8 ,网卡地址选择VM8 NAT的那一块

  • ipv4处填写与虚拟机互联的地址:192.168.10.2/255.255.255.0 网关:192.168.10.1

 

3、开始安装虚拟机

3.1 虚拟机配置:最小化安装(6台配置)

主控机(spark):第一台 4核、4G、50G

spark二台:全部2核、2G、50G

flume/redis/kafka二台:全部1核、1G、50G

 

3.2 安装过程

开始安装时就把网络、主机名,IP统一直接配好:

选择install CentOS 7

选择安装时用的语言

最小安装

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

pub.ryan

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值