hadoop之yarn部署

最新推荐文章于 2024-07-11 22:23:39 发布

仙人掌仙人

最新推荐文章于 2024-07-11 22:23:39 发布

阅读量1.9k

点赞数

分类专栏： hadoop 零基础 Bigdata learning 大数据文章标签： hadoop部署 yarn部署

本文链接：https://blog.csdn.net/Sylvia_D507/article/details/82944137

版权

本文详细介绍了如何进行Hadoop YARN的伪分布式部署，包括配置参数、启动ResourceManager和NodeManager进程，以及验证部署成功的方法。通过设置mapred-site.xml和yarn-site.xml文件，启动相关守护进程，并通过web界面查看ResourceManager状态，确保部署顺利完成。

摘要由CSDN通过智能技术生成

yarn伪分布式部署：

官网要求：
YARN on Single Node
You can run a MapReduce job on YARN in a pseudo-distributed mode by setting a few parameters and running ResourceManager daemon and NodeManager daemon in addition.
The following instructions assume that 1. ~ 4. steps of the above instructions are already executed.
1、Configure parameters as follows:
etc/hadoop/mapred-site.xml:

etc/hadoop/yarn-site.xml:

2、Start ResourceManager daemon and NodeManager daemon:
$ sbin/start-yarn.sh
2、Browse the web interface for the ResourceManager; by default it is available at:
ResourceManager - http://localhost:8088/
4、Run