利用VMware 克隆功能，加快创建hadoop虚拟机集群

最新推荐文章于 2024-06-12 20:59:08 发布
最新推荐文章于 2024-06-12 20:59:08 发布
阅读量2.1k 收藏 1
点赞数
分类专栏： Hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lipengshuai0507/article/details/12004775
版权
本文介绍了如何利用VMware Workstation 9.0的克隆功能，高效地复制已配置好的Ubuntu 12.04虚拟机，以搭建Hadoop集群。通过克隆、修改IP和主机名，大大节省了安装时间。详细步骤包括克隆虚拟机、调整网络配置及主机名设置。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

本人应用的VMware Workstation 9.0 ，本人首先Ubunutu12.04 虚拟机slave1.hadoop，然后安装好Oracle jdk7 后，发现jdk7安装的过程相当的漫长（和本人的网速有关），如果每台虚拟机节点都一一这么装下去，甚是浪费生命。然后本人突发奇想，可以通过克隆功能去快速复制已经创建的虚拟机，然后在修改IP配置和主机名称，这样就节省了大量时间。

    一下是本人的步骤：

  （1）选择到slave1.hadoop虚拟机，切记不要打开电源，在VMware菜单下选择点击：  虚拟机—>管理—>克隆

  （2）看到如下窗口后，下一步

                                      

           选择下一步，

                                        

        选择：

最低0.47元/天 解锁文章
hadoop集群搭建-克隆虚拟机，安装jdk，hadoop
m0_62569064的博客
10-15 861
集群搭建第二步安装这jdk和hadoop
VMware搭建Hadoop集群 for Windows（完整详细，实测可用）_vmware安装hadoop教程
kenzsoft的博客
04-30 2348
SSH服务的作用一般是有两方面：一是便于虚拟机节点之间免密访问，二是传输数据时会有加解密的过程安全性更高。为了这三个节点间免密登录，比如后面在启动hadoop服务时，主节点启动其它从节点，就需要免密去执行。搭建集群需要3个虚拟机，hadoop01，hadoop02，hadoop03，已经安装了hadoop01，剩下两个需要用到虚拟机克隆。下载一个linux版本的JDK，这里是 jdk-8u161-linux-x64.tar.gz，3台机器均要执行以下。最后执行java -version看下是否配置成功。
Hadoop--克隆3x虚拟机
FunnyPrince_的博客
05-27 574
1.先关闭客户机； 2.右键要克隆的虚拟机–管理–克隆–>虚拟机中的当前状态–>创建完整克隆–>新虚拟机名称/位置–>完成 3.克隆完成后，输入：vim /etc/sysconfig/network-scripts/ifcfg-ens33; 进入Hadoop102修改ip：IPADDR=192.168.10.102； 4.查看主机名称：vim /etc/hostname; 将主机名称修改成hadoop102； 5.输入 vim /etc/hosts;查看模板虚拟机； i
Hadoop学习笔记之克隆虚拟机
m0_59076048的博客
12-09 1657
CENTOS虚拟机克隆
Hadoop环境配置之虚拟机克隆
qq_43401162的博客
12-17 2222
虚拟机克隆及克隆机的相关配置
hadoop搭建教程之一（VM克隆虚拟机）
shaopeng5211的专栏
03-13 1551
初学Hadoop，在此写下学习笔记，与各位大神们交流共享。 第一步：右键点击已创建虚拟机--》Manager（管理）--》clone（克隆） 因为需要多台虚拟机同时启动，在这里选完全复制，其他默认即可。 第二步：进入克隆虚拟机，修改以下配置： 1：配置IP（我用的VM，克隆后Mac地址自动就改了，这里可不做修改） vi /etc/sysconfig/network-s
虚拟机集群部署hadoop
qq_48388003的博客
01-18 1593
5.关闭防火墙（root下执行） systemctl stop firewalld systemctl disable firewalld 6.配置普通用户（xiaoyi）具有root权限（root下执行） vim /etc/sudoers 修改/etc/sudoers文件，找到%wheel下面添加一行： ## Allow root to run any commands anywhere root ALL=(ALL) ALL %wheel ALL=(ALL)
VMware搭建Hadoop集群 for Windows（完整详细，实测可用）_vmware安装hadoop教程(1)
2401_84184638的博客
04-28 1409
SSH服务的作用一般是有两方面：一是便于虚拟机节点之间免密访问，二是传输数据时会有加解密的过程安全性更高。为了这三个节点间免密登录，比如后面在启动hadoop服务时，主节点启动其它从节点，就需要免密去执行。搭建集群需要3个虚拟机，hadoop01，hadoop02，hadoop03，已经安装了hadoop01，剩下两个需要用到虚拟机克隆。下载一个linux版本的JDK，这里是 jdk-8u161-linux-x64.tar.gz，3台机器均要执行以下。这里使用的是 hadoop-3.1.3.tar.gz。
Hadoop环境搭建(6)--克隆虚拟机
m0_56841551的博客
12-07 538
一定先把被克隆的虚拟机关机，右键单我的计算机（CentOS），选择克隆 将虚拟机克隆两次 分别将Hadoop（1）中的内容重新修改一遍 注意：IP地址要改成不同的 例如：主机名1——Hadoop100 IP地址——192.168.1.100 主机名2——Hadoop101 IP地址——192.168.1.101 主机名3——Hadoop102 IP地址——192.168.1.102 ...
Hadoop集群搭建__7.克隆虚拟机
feizuiku0116的博客
10-10 632
一、虚拟机的克隆 虚拟机右键>管理>克隆 下一步 选择克隆源 创建完整克隆 选择虚拟机位置 克隆完成 重复上述步骤创建tunabook103、tunabook104 二、虚拟机配置 配置网络地址 tunabook102 vim /etc/sysconfig/network-scripts/ifcfg-ens33 # 修改的内容 IPADDR=192.168.10.102 vim /etc/hostname # 修改的内容 tunabook102 reboot pi
HADOOP集群搭建 - 4 - 克隆虚拟机
xdkiller的专栏
12-07 393
1、克隆虚拟机（克隆前关闭客户机） 2、克隆完成后启动并配置虚拟机 修改网卡信息 vim /etc/udev/rules.d/70-persistent-net.rules 删除网卡eth0，把网卡eth1修改为eth0 设置IP vim /etc/sysconfig/network-scripts/ifcfg-eth0 修改三处位置MAC地址和网卡MAC地址保持一致，也可以通过VM虚拟机查看 UUID 随便修改一个十六进制的数即可 设置主机名 vim /etc/sys
3.Linux虚拟机下的Hadoop集群搭建之克隆虚拟机及其配置
weixin_52010459的博客
07-06 1775
建立三台虚拟机为Hadoop的配置作铺垫
hadoop集群搭建之CentOS7克隆
tyh1579152915的博客
10-26 379
1、查看防火墙是否关闭
克隆虚拟机以及Hadoop集群搭建
Zheng_zi的博客
06-12 1115
用Xshell连接虚拟机。
Hadoop入门(五)——Hadoop集群搭建-克隆三台虚拟机（图文步骤详解2021）
a18850765326的博客
12-02 583
...
二、hadoop集群搭建，克隆虚拟机
weixin_44340038的博客
07-27 714
注：hadoop101留给了一个尾分布式，单台服务器的操作使用，102，103，104搭建的是完全分布式，真正的集群，后续所有配置框架基于这个来的。1、利用模板机hadoop100，克隆三台虚拟机：hadoop102、hadoop103、hadoop104。依次克隆出hadoop102，hadoop103，hadoop104。最后ping外网，ping通外网，且将xshell也配置好。创建链接克隆：类似创建快捷方式，因此选创建完整克隆。3、配置克隆出来的虚拟机的IP地址，主机名称。2.1点击管理→克隆。
VMware 下Hadoop集群环境搭建之虚拟机克隆,Hadoop环境配置
热门推荐
TMH_ITBOY的博客
05-05 1万+
在上一篇我们完成了ContOS网络配置以及JDK的安装,这一篇将在上一篇的基础上继续讲解虚拟机的克隆,hadoop环境搭建 传送门: VMware 下Hadoop集群环境搭建之新建虚拟机 VMware 下Hadoop集群环境搭建之为虚拟机安装CentOS 6.7 64位系统 VMware 下Hadoop集群环境搭建之CentOS 6.7 网络配置的相关配置,JDK的安装 虚拟机...
Vmware通过克隆配置Hadoop3.2.1集群-----本文将尽可能详尽的从 零配置
qq_39494664的博客
04-24 576
注意以下内容涉及shell操作的代码 #表示需要root权限，$表示普通用户 摘要: 通过本文,可以掌握一下几个知识点 虚拟机NAT网络设置 jdk安装配置 hadoop安装 hadoop完全分布式配置 几个小tips vmware NAT网卡设置 什么是NAT ​ NAT（Network Address Translation，网络地址转换）是1994年提出的。当在专用网内部的一些主机本来已...
hadoop集群 克隆虚拟机 注意事项
03-30 394
克隆虚拟机之后，首先删除/etc/udev/rules.d/70-persistent-net.rules文件， 然后修改/etc/sysconfig/network-scriptd/ifcfg-eth0文件， 修改HWADDR，IPADDR以及注释掉或删除UUID开头的一行内容，并修改HWADDR的内容为实际的地址，最后修改机器名。 ...
vmware虚拟机启动Hadoop集群
最新发布
02-25
### 设置和启动 Hadoop 集群 #### 准备工作 为了在 VMware 中成功设置并启动 Hadoop 集群，需准备三台虚拟机：`hadoop01`, `hadoop02`, 和 `hadoop03`. 已经完成了一台虚拟机 (`hadoop01`) 的安装，剩余两台可以利用已有的虚拟机通过克隆功能快速创建[^1]. #### 创建额外节点 对于未建立的节点 (即 hadoop02, hadoop03)，推荐采用已有虚拟机实例进行复制。具体操作是在 VMware Workstation 或 Player 中选中源虚拟机，在菜单栏找到【管理】-> 【克隆】选项来执行此过程。 #### 网络配置调整 确保所有虚拟机能正常访问外网以及相互间通信至关重要。为此，编辑 VMnet8 NAT 设置下的子网 IP 地址范围使之不与其他物理网络冲突；另外确认每台机器上的 `/etc/hosts` 文件含有集群内各成员对应的主机名到IP映射记录[^2]. ```bash # Example of /etc/hosts entry on each node. 192.168.x.1 hadoop01 192.168.x.2 hadoop02 192.168.x.3 hadoop03 ``` #### SSH无密码登录配置 为了让 Master 节点无需输入密码即可向 Slave 发送指令，需要生成SSH密钥对并将公钥分发给其他节点： ```bash ssh-keygen -t rsa # On master machine only cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys chmod 600 ~/.ssh/authorized_keys scp ~/.ssh/id_rsa.pub user@slave:/tmp/ ssh slave "cat /tmp/id_rsa.pub >> ~/.ssh/authorized_keys && chmod 600 ~/.ssh/authorized_keys" ``` #### 修改Hadoop配置文件 更新 `$HADOOP_HOME/etc/hadoop/core-site.xml`, `$HADOOP_HOME/etc/hadoop/yarn-site.xml`, 及 `$HADOOP_HOME/etc/hadoop/slaves` 文件中的必要参数以适应多节点环境需求. 最后一步就是格式化 NameNode 并启动整个分布式系统: ```bash hdfs namenode -format start-dfs.sh start-yarn.sh jps # Verify processes running correctly across nodes ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值