记录搭建hadoop集群的过程

又是被bug折磨的一天

已于 2023-06-05 20:02:01 修改

阅读量145

点赞数 1

文章标签： linux 运维 centos

于 2023-06-04 15:08:32 首次发布

原文链接：https://blog.csdn.net/weixin_46141936/article/details/123388627

版权

文章详细描述了在VmWare15环境下安装CentOS-7.6-x64位系统的过程，包括配置网络、设置静态IP、修改主机名、安装SSH并实现集群间的免密登录，以及处理安装和连接中遇到的问题。

摘要由CSDN通过智能技术生成

Linux(CentOS-7.6-x64位)基础配置, 虚拟机平台VmWare15
CentOS-7.6-x64镜像下载： https://www.aliyundrive.com/s/72Xg449t6i8 提取码: 32rm

VmVare15安装包下载带序列号：VmVare15安装包下载带激活序列号资源-CSDN文库

点击关闭，点击完成，即可

如何查看自己的计算机的处理器(CPU)数和内核数?

(487条消息) CentOS7.6的详细安装步骤_岁月轻扰的博客-CSDN博客

配置镜像文件：

点击开启此虚拟机，键盘上的上下箭头按键可以进行选择，选中第一个后，敲回车就开始安装了。

剩下的参考这个博客:(我安装的是没有桌面的，这个博客安装的是有桌面的，适当参考)

(487条消息) 使用 VMware 创建一个新的虚拟机_vmware创建虚拟机_汪小霜的博客-CSDN博客

剩下的配置文件主要是参考博客：

(486条消息) 大数据软件安装配置教程[Linux, JDK, MySQL, Hadoop, ZooKeeper, Hive, Flume, Kafka, HBase-Phoenix, Scala, Spark等等]_大数据安装_hellosrc | remake的博客-CSDN博客

依次点击确定，确定。

vi  /etc/sysconfig/network-scripts/ifcfg-ens33

后来又修改了一下IPADDR：（需要重启reboot后，虚拟机ip地址才会改过来）

输入命令：reboot（重启虚拟机），之后发现主机名改过来了

vi /etc/hosts

windows的hosts文件也配置一下:位置在 C:\WINDOWS\System32\drivers\etc下

中途，我又去下载安装了个xshell7，有需要的链接放这里了：

本机ping不通虚拟机的ip地址：192.168.125.11

通过参考以下博客解决了问题：

(512条消息) 本地ping不上虚拟机地址？只需简单几步即可_本地ping不通虚拟机_稚皓君的博客-CSDN博客

yum下载相关必备的软件包

yum install -y rsync 
yum install -y gcc 
yum install -y gcc-c++  
yum install -y vim 
yum install -y wget 
yum install -y perl  
yum install -y ntp 
yum install -y ntpdate 
yum install -y net-tools  
yum install -y lrzsz  
yum install -y libaio  
yum install vixie-cron（报错说：没有可用软件包 vixie-cron，网上查说命令是这个yum install cronie）
yum install crontabs

yum的使用介绍参考：

(515条消息) yum和vim须掌握的常用操作_yum install vim -y_今年依旧去年春的博客-CSDN博客

要完整克隆两台虚拟机，搭建hadoop分布式集群参考的博客:

(515条消息) 搭建Hadoop分布式集群的详细教程_hadoop完全分布式集群搭建全过程_木木子v的博客-CSDN博客