Hadoop NameNode启动的资源检查

本文详细分析了Hadoop NameNode在启动过程中对资源的检查,包括startCommonServices方法、FSNamesystem的资源检查、NameNodeResourceMonitor线程以及NameNodeResourceChecker类的构造和功能。这些组件共同确保NameNode在启动时能够正确监控和管理磁盘资源,特别是在资源不足时进入安全模式。
摘要由CSDN通过智能技术生成

目录

回顾

startCommonServices

FSNamesystem

NameNodeResourceMonitor

NameNodeResourceChecker

总结

欢迎扫描关注我的公众号!


回顾

上一篇分析了Hadoop的Rpc服务,这一篇将接着往下分析startCommonServices这个方法,先看代码整体的流程。

startCommonServices

主要是两步:

  • namesystem.startCommonServices

  • rpcServer.start();

 

FSNamesystem

FSNamesystem是NameNode核心成员变量用来管理元数据(实现对DataNode、Block的管理以及读写日志),FSNamesystem的startCommonServices将启动一些磁盘检查、安全模式等一些后台服务及线程。

1、将需要检查的URL添加到volumes中 , 后台有线程会一直执行hasAvailableDiskSpace来检查

2、checkAvailableResources(); 进行资源检查

3、NameNode启动,进入到safemode阶段,处于一个等待汇报blocks的状态

4、汇报所有的block,用于后面判断是否进入安全模式

5、激活BlockManager

先new一个NameNodeResourceChe

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值