SS00006.spark——|Hadoop&Spark环境部署.v06|——|Hadoop.v06|集群启动|单节点启动|

yanqi_vip

已于 2022-04-18 14:53:30 修改

阅读量249

点赞数

分类专栏： developv003——spark 文章标签： hadoop 大数据 hdfs spark 分布式

于 2022-04-17 16:02:00 首次发布

不予转载

本文链接：https://blog.csdn.net/yanqi_vip/article/details/124240473

版权

本文介绍了如何启动HDFS集群和YARN集群，包括HDFS的单节点格式化和DataNode启动，以及YARN的单节点启动。同时，提供了Hadoop集群启动和停止的命令汇总，帮助读者掌握集群管理。

摘要由CSDN通过智能技术生成

一、启动HDFS集群

### --- 启动集群注意事项

~~~     # 注意：如果集群是第一次启动，需要在Namenode所在节点格式化NameNode，
~~~     # 非第一次不用执行格式化Namenode操作！！

二、单节点启动：格式化NameNode

### --- 单节点启动

~~~     # 所有节点执行
[root@hadoop01 ~]# cd /opt/yanqi/servers/hadoop-2.9.2/
[root@hadoop01 hadoop-2.9.2]# hadoop namenode -format

common.Storage: Storage directory /opt/yanqi/servers/hadoop-2.9.2/data/tmp/dfs/name has been successfully formatted.

~~~     # 注：输出这句内容说明格式化成功
/************************************************************
SHUTDOWN_MSG: Shutting down NameNode at hadoop01/192.168.1.121
************************************************************/

### --- 格式化命令执行效果：

~~~     格式化后创建的文件：/opt/yanqi/servers/hadoop-2.9.2/data/tmp/dfs/name/current

[root@hadoop01 hadoop-2.9.2]# ll /opt/yanqi/servers/hadoop-2.9.2/data/tmp/dfs/name/current
total 16
-rw-r--r-- 1 root root 323 Jun 20 12:41 fsimage_0000000000000000000