【大数据集群搭建-CDH-（1）虚拟机基础环境配置】CDH版本进行大数据集群各组件环境部署-（1）虚拟机基础环境配置

已于 2024-01-03 15:21:42 修改
阅读量541 收藏 1
点赞数 1
分类专栏： 大数据安全及计算机基本原理 文章标签： 大数据 网络 linux
于 2023-02-22 11:28:16 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_53543905/article/details/129158887
版权

【大数据集群搭建-CDH-（1）虚拟机基础环境配置】CDH版本进行大数据集群各组件环境部署-（1）虚拟机基础环境配置

1）解决不能联网问题

1.1.如果Windows中没有VMnet8需要添加网络

1.2.配置VMware中的网络

在这里插入图片描述

在这里插入图片描述

1.3.配置Windows中的网络

在这里插入图片描述

1.4.启动并修改配置文件

在这里插入图片描述

在这里插入图片描述

1.5.虚拟机联网分享设置

在这里插入图片描述

在这里插入图片描述

1.6.测试Windows端和网络是否连通

在这里插入图片描述

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-k6V2fefV-1677035612733)(D:\resume\CDH\CDH_Linux基础环境设置_2.assets\image-20210402104626611.png)]

2）安装常用命令

2.1.ifconfig

在这里插入图片描述

2.2.vim

在这里插入图片描述

在这里插入图片描述

2.3.yum更新

在这里插入图片描述

2.4.关闭防火墙

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Vaxq13QL-1677035612737)(D:\resume\CDH\CDH_Linux基础环境设置_2.assets\image-20210402105124799.png)]

2.5.docker

在这里插入图片描述

安装vim,telnet,ifconfig,根据情况进行安装

在这里插入图片描述

3）复制虚拟机

在这里插入图片描述

3.1.生成新的MAC地址

在这里插入图片描述

3.2.修改第二、三台虚拟机配置

在这里插入图片描述

3.3.确定配置好的MAC地址

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-iIQ8JrOZ-1677035612740)(D:\resume\CDH\CDH_Linux基础环境设置_2.assets\image-20210402111914271.png)]
最后通过客户端进行连接三台虚拟机,然后就可以使用了

HWADDR=00:50:56:3D:76:DC
UUID=86a39133-8e6d-4054-878b-06702c1d361e

IPADDR=192.168.52.151

HWADDR=00:50:56:32:19:88
HWADDR=00:50:56:31:C7:52

【其他相关文章】

【大数据集群搭建-Apache】Apache版本进行大数据集群各组件环境部署

【大数据集群搭建-CDH-（1）虚拟机基础环境配置】CDH版本进行大数据集群各组件环境部署-（1）虚拟机基础环境配置

【大数据集群搭建-CDH-（2）ClouderManager相关介绍】CDH版本进行大数据集群各组件环境部署-（2）ClouderManager相关介绍

【大数据集群搭建-CDH-（3）VMware-Linux磁盘扩容】CDH版本进行大数据集群各组件环境部署-（3）VMware-Linux磁盘扩容

【大数据集群搭建-CDH-（4）CDH部署前的环境准备】CDH版本进行大数据集群各组件环境部署-（4）CDH部署前的环境准备

【大数据集群搭建-CDH-（5）CDH环境搭建】CDH版本进行大数据集群各组件环境部署-（5）CDH环境搭建

bmyyyyyy
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
CDH大数据平台搭建之VMware及虚拟机安装
qq_41924766的博客
06-02 1307
CHD大数据平台搭建-VMware及虚拟机安装前言一、下载所需框架二、安装(略)三、安装虚拟机1、新建虚拟机(按照操作即可)总结 前言 搭建大数据平台需要服务器，这里通过VMware +CentOS镜像进行模拟，供新手学习必备。 一、下载所需框架 VMware 和CentOS可以通过官网下载，这里我提供大家也会提供所需软件，请到百度网盘自行下载，提取码：cdh5 二、安装(略) VMware安装就不演示了，简单的windows软件安装，相信大佬都会。 三、安装虚拟机 1、新建虚拟机(按照操作即可) 1、
CDH搭建步骤详细二_环境准备
sx157559322的博客
12-20 288
CDH搭建之环境准备步骤
CDH集群搭建
m0_61607827的博客
03-07 2153
一、说明 节点(CentOS7.5) Server || Agent CPU node11 Server || Agent 4G node12 Agent 2G node13 Agent 2G 二、系统环境搭建 1、网络配置(所有节点) 1．设置主机名和IP 2．配置/etc/hosts IP和主机名的映射 2、SSH免密码登录 1．产生公钥和私钥：ssh-keygen -t rsa（一直回车直即可） 2．将公钥分发...
CDH 6.3.2安装部署（超详细）
最新发布
2201_75470972的博客
05-23 2208
超级详细的cdh6.3.2安装部署教程
CDH6.3.1安装
Allenzyg的博客
05-28 5686
CDH6.3.1安装遇到很多问题，我想主要是由于条件有限，毕竟自己的电脑内存不如专业集群的内存大（如果是内存和硬盘充足，有些是可以避免的，甚至不会出现报错的情况），这里就介绍一下我用VMware安装的虚机中搭建CDH集群的辛酸历程。为了避免多次、重复安装不成功，所以需要具备以下条件： 1. 内存要足够大 我的电脑内存是8G： 使用虚拟机安装 Cloudare server：4G Cloudare agent：分别为1G 电脑最后很卡，而且内存98%。 官方推荐最小内存为10G，所以最好还是听从官方的建...
CDH集群搭建（二）——虚拟机网络设置
qq_42490075的博客
02-18 484
VMWare虚拟机网络设置 NAT模式
【大数据集群搭建-CDH-（2）ClouderManager相关介绍】CDH版本进行大数据集群各组件环境部署-（2）ClouderManager相关介绍
weixin_53543905的博客
02-22 1128
Server:是CM的核心,提供了统一的UI展现,和API借口,方便用户和CDH进行交互,并且进行监控和诊断Clients:管理者通过可视化界面对ClouderaManager进行管理API:Server提供了一些借口,可以让开发人员进行自定义的开发,来进行控制ServerClouderaRepository:一些大数据的组件如hive,spark等,可以直接通过这个云端进行安装ManagementService:提供监控,报警,报告功能的一些服务。
CDH大数据集群搭建(2019-12-20).docx
12-26
完全从0到1.从虚拟机搭建开始到集群参数配置，一步一步超级详细，无经验也可搭建。本文档采用完全离线方式搭建，搭建过程轻松，清晰。
CDH集群部署.doc
03-21
本文档描述了在虚拟机上的CDH集群部署方案，该方案用于测试环境，同时也可以作为实际环境部署的指导。该方案采用VMware Workstation Pro 12虚拟机环境，虚拟三台机器，一主两备；主节点4G内存，50G磁盘空间。 一、...
Cloudera大数据平台环境搭建(CDH5.13.1)傻瓜式说明书.pdf
10-18
一旦环境搭建完成，你可以通过CM界面来管理Hadoop集群，部署和配置各种大数据服务，进行数据处理和分析。注意，随着技术的发展，新的版本可能会有不同的安装和配置要求，因此建议定期更新和维护你的环境。
hadoop-2.6.0-cdh5.14.4 for windows
07-04
这个版本是基于Cloudera Distribution Including Apache Hadoop（简称CDH）的5.14.4版本，集成了多个Apache大数据组件，为Windows用户提供了在本地运行Hadoop集群的能力。 Hadoop是Apache软件基金会开发的一个开源...
CDH_5.7.0_基于VM虚拟机的hadoop集群搭建.docx
12-21
CDH_5.7.0_基于VM虚拟机的hadoop集群搭建.docx
CDH软硬件配置建议
12-07
该文档为Cloudera官方提供的CDH部署的软硬件配置建议，包括操作系统、JDK、浏览器、数据库、Hadoop关键组件版本、硬件配置以及网络拓扑等相关配置建议。
hadoop-2.6.0-cdh5.14.0 64位 native文件库
05-24
在CDH 5.14.0版本中，Cloudera对Hadoop进行了优化和调整，以适应企业级环境的需求，例如更好的安全性、监控和管理工具。此外，这个版本可能还包含了其他Hadoop生态系统的组件，如HBase、Hive、Spark等，这些组件也...
【CDH】超详细-搭建本地大数据研发环境（16G内存+CDH）
菜鸟叔叔的博客
06-11 1929
工欲善其事必先利其器，在经过大量的理论学习以后，需要有一个本地的研发环境来进行练手。已经工作的可以不依赖于公司的环境，在家也可以随意的练习。而自学大数据的同学，也可以进行本地练习，大数据是一门偏实践的学科，在找工作之前进行一些实践操作，也更利于对大数据知识的理解。本文将从头开始详细的记录整个大数据环境的搭建过程，本文所使用的笔记本电脑内存为16G，将使用CDH6.3.2管理整个大数据集群。本文共四个部分，一定要保证每一个部分都安装成功以后再向下进行。首先要安装好VMwareWorkstation软件，随后新
docker swarm
lilele12211104的专栏
04-06 2367
集群管理 docker swarm join --token SWMTKN-1-55g0lk1oofqdmf6adpn4idy7wxvql65t6rlhmq0khwlmwq5t6j-bkijx6trp01n8fn3hwhf5h7ap 10.10.1.195:2377 service docker service create --name busybox busybox:latest sh -c “while true; do sleep 3600; done” docker service ls d
大数据练习环境部署(2) -VMware及虚拟机安装
OzupeSir
12-06 759
Vmware ubuntu安装
CDH6.x企业级大数据平台搭建
01-30
本课程主要讲解在实际项目开发中，企业构建大数据平台的方案及实战。详细阐述企业级大数据平台的架构设计、机器选型、集群规划、技术选型、资源规划等技术方案。实战演练基于Cloudera Manager(CDH6)安装部署、监控管理、运营维护大数据平台的各个服务组件。从理论经验到实战演练，从设计思想到流程实施，亲力亲测，你也绝对可以。推荐进阶课程：大数据运维尖刀班
基于CDH6.2.0 搭建大数据集群
DaiSnow的博客
12-09 1997
Cloudera Manager集群搭建 hostname按表格进行修改，/etc/hosts文件添加节点 Ip+hostname hostname ip role cdh-nn01 172.16.0.188 HadoopMaster，CM Server，Mysql，Hue，HS2 cdh-nn02 172.16.0.189 Hadoop Master，CMAgent，HS2 cdh-nn03 172.16.0.190 Hadoop Master，CMAgent，HS2,Impala
5-大数据技术之模板虚拟机环境准备
12-15
5_大数据技术之模板虚拟机环境准备

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值