Hadoop3.x完全分布式搭建（详细）

最新推荐文章于 2023-09-05 16:01:48 发布

u012804784

最新推荐文章于 2023-09-05 16:01:48 发布

阅读量2.4k

点赞数 1

分类专栏： android 文章标签：分布式 big data hadoop 计算机

本文链接：https://blog.csdn.net/u012804784/article/details/123391507

版权

本教程详细介绍了如何在Centos7系统上使用root用户搭建Hadoop3.x的完全分布式环境。包括创建hadoop用户、配置静态IP、修改主机名、关闭防火墙、设置权限、安装Java和Hadoop、配置环境变量、克隆虚拟机、修改克隆主机的主机名和IP、配置免密登录以及执行Hadoop的初始化格式化操作。

摘要由CSDN通过智能技术生成

Python微信订餐小程序课程视频

https://edu.csdn.net/course/detail/36074

Python实战量化交易理财系统

https://edu.csdn.net/course/detail/35475
环境准备

vm虚拟机（自行安装Centos7系统）
hadoop3.x安装包（linux版本）
java1.8安装包（linux版本）

为了能够按照教程顺利操作，需要注意几点细节

不要不看文字直接复制粘贴
操作命令的用户很重要，否则后续会引发关于权限的问题
ftp 与终端工具需要自己操作使用本教程不涵盖操作，如有需要，自行百度，本教程均使用终端shell工具截图，其性质与linux系统右键打开终端相同。

开始啦！

使用root用户登录，用一个单独的用户管理hadoop集群，所以要用管理员(root)用户创建一个名字为hadoop的用户。

[root@hadoop102 ~]# useradd hadoop

设置 hadoop 用户的密码

[root@hadoop102 ~]# passwd hadoop

给 hadoop 用户提权，编辑如下路径文件

[root@hadoop102 ~]# vim /etc/sudoers

将文件此处修改为这样（在100行左右）

修改静态IP

[root@hadoop102 ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33

静态ip文件修改如下

TYPE="Ethernet"
PROXY_METHOD="none"
BROWSER_ONLY="no"
BOOTPROTO="static"
DEFROUTE="yes"
IPV4_FAILURE_FATAL="no"
IPV6INIT="yes"
IPV6_AUTOCONF="yes"
IPV6_DEFROUTE="yes"
IPV6_FAILURE_FATAL="no"
IPV6_ADDR_GEN_MODE="stable-privacy"
NAME="ens33"
UUID="385ea190-1b85-42cf-9df4-916f2dd86bc7"
DEVICE="ens33"
ONBOOT="yes"
#ip 写自己设置的
IPADDR=192.168.127.112
#子网掩码 固定的
NETMASK=255.255.255.0
#网关 就是将你ip最后一段改成1
GATEWAY=192.168.127.1