【HDFS】主从角色、辅助角色

最新推荐文章于 2024-06-07 10:47:57 发布

沉淀的老山羊

最新推荐文章于 2024-06-07 10:47:57 发布

阅读量913

点赞数 2

文章标签： hadoop hdfs 大数据

本文链接：https://blog.csdn.net/m0_62963408/article/details/128049503

版权

在这里插入图片描述

在这里插入图片描述

在我们搭建集群的时候，对应不同的机子，肯定给他们分配了不同的角色，其中必定有一台机子是主角色也就是NameNode。
NameNode中存储着文件块的元数据，正因为它掌握着这些文件块的信息，所以所有的文件操作都必须仰仗它，它是集群的"老大"，它也是访问HDFS文件系统的唯一入口。
NameNode内部通过内存和磁盘文件两种方式管理元数据。
其中磁盘上的元数据文件包括Fsimage内存元数据镜像文件和edits log编辑日志，在后面介绍元数据的时候，会细讲这这二者的作用

怎么查看当前虚拟机的角色

$[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-xb6yodad-1669432484595)(C:\Users\HWQ\AppData\Roaming\Typora\typora-user-images\image-20221125183318159.png)]$

$[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ivTVmBDX-1669432484596)(C:\Users\HWQ\AppData\Roaming\Typora\typora-user-images\image-20221125183346438.png)]$

可以看到，node01虚拟机同时存在NameNode和DataNode两个角色，意味着这台虚拟机同时存放着所有文件块的元数据，以及部分文件块

$[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-kQtqEYwh-1669432484596)(C:\Users\HWQ\AppData\Roaming\Typora\typora-user-images\image-20221125183906374.png)]$

$[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-8gqeNQDo-1669432484597)(C:\Users\HWQ\AppData\Roaming\Typora\typora-user-images\image-20221125184223019.png)]$

除了DataNode和NameNode之外，还有另一个守护进程，它称为secondary NameNode。充当NameNode的辅助节点，但不能替代NameNode。
secondaryNameNode的主要职责就是帮助NameNode减轻压力，一些NameNode做不过来的事情，可以交给secondaryNameNode去做，相当于NameNode的"秘书"。