利用虚拟机快速搭建N个分布式计算节点服务器

最新推荐文章于 2024-09-11 16:50:48 发布

lishiyuzuji

最新推荐文章于 2024-09-11 16:50:48 发布

阅读量5.7k

点赞数 2

分类专栏：大数据虚拟机大数据之路 linux 大数据学习之路

本文链接：https://blog.csdn.net/lishiyuzuji/article/details/79162818

版权

本文介绍了如何利用VMWare搭建多个虚拟机，作为分布式计算节点。首先安装VMWare，然后新建并配置虚拟机，安装Linux操作系统。接着，通过桥接模式设置网络连接，并克隆虚拟机以创建多个节点。最后，配置各节点的IP地址，确保它们之间可以通信，从而完成分布式计算环境的构建。

摘要由CSDN通过智能技术生成

 
 ------------本文是博主原创，如内容有问题，请予以指正，谢谢。-------------

  搭建大数据的集群环境，需要多个集群节点，就是需要有多个机器，由于硬件资源有限，为达到这样的目的，可以利用虚拟机完成。在虚拟机上搭建操作系统，实现和物理机一样的操作。 

  第一步、安装虚拟机 

  此处我们选用VMWare，其在虚拟机领域是比较成熟的产品，运行稳定。 

  版本：VMWare Workstation 9.0 

  双击安装即可，就像安装普通应用程序一样。安装完成后双击图标打开VMware，如下： 

  第二步、新建虚拟机，安装linux操作系统 

  1、文件-新建虚拟机 

  2、下一步 

  3、选择操作系统镜像文件，继续 

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

lishiyuzuji

关注关注

2
点赞
踩
15

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

完全分布式-centos虚拟机集群环境搭建

weixin_40460171的博客

12-29

917

目录1.准备3台虚拟机创建一台虚拟机（关闭防火墙、静态ip、主机名称）克隆虚拟机配置ssh实现只用输入一次密码集群时间同步时间服务器配置（必须root用户）修改ntp配置文件修改/etc/sysconfig/ntpd文件在其他机器配置10分钟与时间服务器同步一次配置3台虚拟机这么久，有没有更好的方法呢？编写集群分发脚本xsyncxsync脚本实现修改脚本xsync具有执行权限调用xsync脚本方法工具：VMWare-15.5.0，CentOS-6.8-x86_64-bin-DVD.iso 1.准备3台

4节点服务器 虚拟机集群,虚拟机和云服务器搭建集群

weixin_32496175的博客

08-10

931

虚拟机和云服务器搭建集群内容精选换一换华为云VR云渲游平台帮助中心，为用户提供产品简介、快速入门、用户指南、常见问题等技术文档，帮助您快速上手使用VR云渲游平台。虚拟IP(Virtual IP Address，简称VIP)是一个未分配给真实弹性云服务器网卡的IP地址。弹性云服务器除了拥有私有IP地址外，还可以拥有虚拟IP地址，用户可以通过其中任意一个IP(私有IP/虚拟IP)访问此弹性云服务器。...

参与评论您还未登录，请先登录后发表或查看评论

分布式计算环境中虚拟机的原始操作

lzw369639的博客

06-11

206

复用：虚拟机可以在硬件机器上复用。存储：虚拟机可以挂起并保存在一个稳定存储器上。恢复：挂起的虚拟机可以在一个新的硬件平台上恢复。

创建虚拟机

最新发布

m0_73192692的博客

09-11

2470

网卡设置完了之后，还得修改linux的安装启动参数，修改网卡的名字centos7默认是 ens33按照如下操作，修改为eth01.在开机选择画面，输入上下左右2.按下tab键，再点两下空格，输入如下指令，修改启动参数3.输入回车，启动4.请注意，必须是英文，以后再也别用中文了，因为你要看日志5.只需要修改亚洲上海时区,自动分区，其他全部默认6.网络设置、修改静态ip地址、设置主机名模板机，主机名 template-linux01网关，10.0.0.254。

节点的时间服务器搭建

heiiochange的博客

09-08

824

时间服务器结构图时间服务器配置 1.检查是否安装ntp时间服务器 [root@hadoop011 hadoop-2.7.2]# rpm -qa | grep ntp ntpdate-4.2.6p5-10.el6.centos.x86_64 fontpackages-filesystem-1.41-1.1.el6.noarch ntp-4.2.6p5-10.el6.centos.x86_...

elasticsearch 学习之搭建简单的elasticsearch多节点服务器

笑為紅顏苦為誰

01-05

4292

上一篇说到本地如何搭建ES的单节点服务器 点击打开链接接下来说明，本地如何搭建ES的多节点服务器 1：将ES解压成三份：第一个作为我们master服务器，后两个作为我的slave服务器，修改对应配置文件如下：配置完毕之后，启动三个节点ES服务，以及对应的ES-HEAD服务 2：启动完服务访问：http://localhost:9100/

云服务器计算节点,POWER架构服务器作为计算节点

weixin_30661119的博客

07-29

473

目标在power机器上安装计算组件，将power机器作为计算节点，并测试Openstack的基本功能。环境1台控制节点(x86机器)5台计算节点(4个x86机器，1个power机器)安装依赖的问题就算将yum源都配置成power架构的yun源还是有一些依赖找不到。power机器安装组件以及组件所需要的依赖，会遇到yum依赖找不到的各种问题。解决方式：1)不分架构的python包，手动pip安装2)...

开新节点架设服务端

wangjinbao5566的博客

06-29

469

#!/bin/bash # # Author: wjb # Update: 2017年6月23日 17:07:32 nodepasswd="rsyncuser:PGrsyncpasswd./" sudo yum install -y appnode-rsync31.x86_64 if [ ! -d /etc/rsyncd ]; then mkdir /etc/r

window 分布式文件服务器,为 Windows 10 部署生成分布式环境

weixin_42290401的博客

08-06

771

为 Windows 10 部署生成分布式环境04/01/2016本文内容在本主题中，你将了解如何复制 Windows 10 部署共享，以方便远程或在分支位置处部署 Windows 10。如果你在分配的环境中工作，则复制部署共享是部署解决方案的一个重要环节。如果图像尺寸达到 5 GB 或更大，你将无法通过网络部署远程办公室中的计算机。你需要复制相关内容，以便客户端可以执行本地部署。在本主题中，我们将...

基于边缘计算的大地电磁法三维反演分布式计算实现.pdf

08-08

这种方法可以快速搭建起分布式计算环境，并能简便地进行资源的扩展。 MPI是一种流行的并行编程模式，通过它可以实现多个进程协同计算以提高计算效率。在大地电磁法三维反演的计算中，采用MPI模式可以有效地利用多核...

java实现分布式项目搭建

m0_67659981的博客

03-05

4770

1 分布式 1.1 什么是分布式分布式系统一定是由多个节点组成的系统。其中，节点指的是计算机服务器，而且这些节点一般不是孤立的，而是互通的。这些连通的节点上部署了我们的节点，并且相互的操作会有协同。分布式系统对于用户而言，他们面对的就是一个服务器，提供用户需要的服务而已，而实际上这些服务是通过背后的众多服务器组成的一个分布式系统，因此分布式系统看起来像是一个超级计算机一样。 1.2 分布式与集群的区别集群是同一个系统部在不同的服务器上,例如一个登陆系统部在不同的服务器上. 分布式是不同的系.

达梦数据库-单节点服务器搭建 DMDSC

袁子建

11-09

871

1.系统环境 1.1硬件环境 ip地址主机名 cpu 内存硬盘网卡 192.168.6.193 yzjdmdsc03 2C 2G 50G，系统盘独立虚拟网卡四块，两块nat模式，两块仅主机模式 172.16.6.193 192.168.194 20G，存储盘 172.16.6.194 1.2软件环境操作系统数据库 centos6.10 dm8.1 1.3网络规划 1.4目录规划名

完全分布式虚拟机准备

weixin_45992021的博客

03-15

9692

完全分布式虚拟机准备完全分布式虚拟机准备具体步骤如下：1.准备3台客户机（关闭防火墙、静态ip、主机名称）2.虚拟机配置1.修改网卡2.修改静态ip3.修改host名称4.修改主机地址映射5.关闭防火墙6.sudo 设置普通用户具有root权限7.创建安装目录并设置权限8.测试3.克隆虚拟机配置1.修改网卡2.修改静态ip3.修改host名称4.安装JDK，安装Hadoop并配置环境变量5.完全分布式JDK与Hadoop同步6.同步程序Mysync 完全分布式虚拟机准备具体步骤如下： 1.准备3台客户机（

OpenStack环境搭建（2） --计算节点

qugq的博客

11-13

1903

本文件为OpenStack计算节点搭建流程

虚拟机搭建分布式环境-虚拟机创建

zhongminyue的博客

03-27

291

1.准备工作下载centos7 下载安装vwmare15 2.新建虚拟机 开始安装以上我均选默认设置root密码等待界面重启虚拟机 至此安装3至4个虚拟机 ...

【VMware 虚拟机CentOS7 分布式环境搭建】

Wzanzan的博客

10-30

730

VMware虚拟机安装centos、yum源安装、虚拟机与主机数据共享、网络信息配置

Hadoop分布式搭建（虚拟机）001

qq_41733481的博客

03-30

310

本文由博主--Bear Wang 手敲，如有雷同，不胜荣幸。欢迎指错！博主QQ759502416 答案：王胡雄 1.修改ip，关闭防火墙（主机和虚拟机都关闭）使虚拟机能ping同主机 2.修改主机名以及映射 1） sudo vim /etc/hostname 2) sudo vim /etc/hosts （将所有的域名和映射都写到文件中） 3.解压JD...

hadoop环境搭建和在本地用虚拟机模拟分布式集群的搭建

qiurongfeng的博客

12-25

2155

由于老师布置的大作业，以及对于想深入的实践下课堂学到的知识，记录下步骤，写了本篇文章。当然也走了一些弯路，希望大家能够一次成功吧。需要的工具： 1：VMwave 2：centOS 可能会用到的东西： 1:centos的yum出现Could not retrieve mirrorlist解决方法 Centos7 安装wget报错，could not retrieve mirrorli...

虚拟机 伪分布式与分布式搭建

SqrsCbrOnly1的博客

06-13

1112

1.伪分布式搭建首先启动一台虚拟机 (确保虚拟机可以联网) 用xshell连接连接成功后使用命令 rz 如果没有rz命令输入yum install lrzsz -y 进行下载 ftp 使用命令rz----- 注：首先下载—yum install lrzsz -y 下载完成后在opt下新建一个文件夹使用 rz 将本机中的jdk压缩包发送到opt下的文件下发送完成后进行解压 t...

linux分布式服务器搭建

04-10

搭建Linux分布式服务器需要先选择合适的分布式架构，例如Hadoop、Spark等，然后根据应用场景和需求搭建服务器集群，选择合适的硬件设备和网络设备，安装操作系统和必要的软件依赖，配置节点间通信、共享存储等基础环境，之后根据具体应用搭建对应的服务和应用程序，最终测试和优化整个系统。