学习篇-Hadoop-HDFS-存放策略

一、Hadoop-HDFS-存放策略

官网解释:HDFS’s placement policy is to put one replica on the local machine if the writer is on a datanode, otherwise on a random datanode in the same rack as that of the writer, another replica on a node in a different (remote) rack, and the last on a different node in the same remote rack.

释义:

  • 第一个副本是在本机架的节点上
  • 第一个副本是在另外一个机架节点上
  • 与第二个副本相同的机架的不同节点上
  • 注意不同版本摆放策略不一样。
二、HDFS-写数据的流程

在这里插入图片描述

三、HDFS-读数据的流程

在这里插入图片描述

四、HDFS-元数据管理-checkpoint

在这里插入图片描述

五、HDFS-safemode

服务启动时,NameNode会进入安全模式,这个时候是没法进行写操作的,NameNode从DataNode接收心跳和Blockreport消息,当已使用NameNode检入该数据块的最小副本数时,该块被视为已安全复制。在使用可配置百分比的安全复制数据块通过NameNode签入(再加上30秒)后,NameNode退出安全模式状态。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值