Hadoop部署伪分布式

伪分布式模式也是只需要一台机器，但是与本地模式的不同，伪分布式使用的是分布式的思想，具有完整的分布式文件存储和分布式计算的思想。只不过在进行存储和计算的时候涉及到的相关的守护进程都运行在同一台机器上，都是独立的Java进程。因而称为伪分布式集群。比本地模式多了代码调试功能，允许检查内存使用情况、HDFS输入输出、以及其他的守护进程交互。

​ 总结来说: 伪分布式集群就是只有一个节点的分布式集群。

平台软件说明

平台&软件	说明
宿主机操作系统	Windows / MacOS
虚拟机操作系统	CentOS 7
虚拟机软件	Windows: VMWare MacOS: Parallels Desktop
SSH工具	Windows: MobaXterm / FinalShell MacOS: FinalShell / iTerm2
软件包上传路径	/root/softwares
软件安装路径	/usr/local
JDK	X64: jdk-8u321-linux-x64.tar.gz ARM: jdk-8u321-linux-aarch64.tar.gz
Hadoop	X64: hadoop-3.3.1.tar.gz ARM: hadoop-3.3.1-aarch64.tar.gz
用户	root

搭建环境准备 

1. 总纲

   1. 确保防火墙是关闭状态。
   2. 确保NAT模式和静态IP的确定 （192.168.10.101）
   3. 确保/etc/hosts文件里, ip和hostname的映射关系
   4. 确保免密登陆localhost有效
   5. jdk和hadoop的环境变量配置
   复制代码

2. 防火墙关闭

   [root@qianfeng01 ~]# systemctl stop firewalld
   [root@qianfeng01 ~]# systemctl disable firewalld
   [root@qianfeng01 ~]# systemctl stop NetworkManager
   [root@qianfeng01 ~]#