超级会员免费看
本文详细介绍了如何在虚拟机中搭建Hadoop的伪分布式环境，从环境准备、JDK和Hadoop的安装，到Hadoop目录结构解析。接着，文章深入探讨了如何启动HDFS并运行MapReduce程序，包括配置集群、启动NameNode、DataNode、ResourceManager和NodeManager，以及操作HDFS文件系统。此外，还涵盖了配置历史服务器和日志聚集功能的步骤，最后对Hadoop的主要配置文件进行了说明。
Hadoop运行模式包括：本地模式、伪分布式模式以及完全分布式模式。
Hadoop官方网站：Apache Hadoop
一、Hadoop运行环境搭建
1、虚拟机环境准备
- 克隆虚拟机；
- 修改克隆虚拟机的静态IP；
- 修改主机名；
- 关闭防火墙；
- 创建yyds用户；
- 配置yyds用户具有root权限；
- 在/opt目录下创建文件夹；
在/opt目录下创建module、software文件夹：
[yyds@hadoop101 opt]$ sudo mkdir module
[yyds@hadoop101 opt]$ sudo mkdir software
订阅专栏 解锁全文
扫一扫
246
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
