HDFS的安全模式介绍

安全模式是HDFS的一种工作状态,处于安全模式的状态下,只向客户端提供文件的只读视图,不接受对命名空间的修改;同时NameNode节点也不会进行数据块的复制或者删除,如:副本的数量小于正常水平。

NameNode启动时,首先fsimage载入内存,并执行编辑日志中的操作。一旦文件系统元数据建立成功,便会创建一个空的编辑日志。此时,NameNode开始监听RPCHttp请求。但是此时NameNode处于安全模式,只接受客户端的读请求。

在安全模式下,各个DataNode会向NameNode发送自身的数据块列表,当NameNode有足够的数据块信息后,便在30秒后退出安全模式,若NameNode发现数据节点过少会启动数据块复制过程(基本不会)。

hadoopNameNode节点启动时,会进入安全模式阶段。在此阶段,DataNode会向NameNode上传他们数据块的列表,让NameNode得到数据块的位置信息,并对每个文件对应的数据块副本进行统计。当最小副本条件满足时,即:一定比例的数据块都到达最小副本数,系统会退出安全模式。而这需要一定的延迟时间。当最小的副本条件未达到要求时,就会对副本数不足的数据块安排DataNode进行复制,直到达到最小的副本数。而在安全模式下,系统会处于只读装态,NameNode不会处理任何数据块的复制和删除命令。

[hadoop@hadoop000 sbin]$ hdfs dfsadmin -safemode get
Safe mode is ON
[hadoop@hadoop000 sbin]$ hdfs dfs -cat /tmp/data.txt
hello	world	welcome
hello	hello	welcome
hello	world	welcome
hello	hello	welcome
[hadoop@hadoop000 sbin]$ hdfs dfs -appendToFile /home/hadoop/data.txt /tmp/data.txt
appendToFile: Cannot append to file/tmp/data.txt. Name node is in safe mode.
[hadoop@hadoop000 sbin]$ hdfs dfs -rm /tmp/data.txt
rm: Cannot delete /tmp/data.txt. Name node is in safe mode.
[hadoop@hadoop000 sbin]$ hdfs dfs -put /home/hadoop/data/h.txt /tmp/
put: Cannot create file/tmp/h.txt._COPYING_. Name node is in safe mode.

 在启动一个刚刚格式化的HDFS时系统不会进入安全模式,因为没有数据块。

HDFS安全模式相关的命令

hadoop dfsadmin -safemode enter   进入安全模式

[hadoop@hadoop000 sbin]$ hdfs dfsadmin -safemode enter
Safe mode is ON

hadoop dfsadmin -safemode leave   强制NameNode退出安全模式

[hadoop@hadoop000 sbin]$ hdfs dfsadmin -safemode leave
Safe mode is OFF

hadoop dfsadmin -safemode get     查看安全模式状态

[hadoop@hadoop000 sbin]$ hdfs dfsadmin -safemode get
Safe mode is ON

hadoop dfsadmin -safemode wait    等待一直到安全模式结束

[hadoop@hadoop000 sbin]$ hdfs dfsadmin -safemode wait
### 执行此命令后,terminal会挂起,知道退出safemode模式,才会输出如下safe mode 状态
Safe mode is OFF

 

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值