【HDFS】FsDatasetImpl系列文章（三）：convertTemporaryToRbw方法

叹了口丶气

已于 2023-02-23 17:10:49 修改

阅读量457

点赞数

分类专栏： HDFS全方位实战文章标签： hdfs java 大数据

于 2023-02-21 11:08:23 首次发布

本文链接：https://blog.csdn.net/yexiguafu/article/details/129133262

版权

HDFS全方位实战专栏收录该内容

171 篇文章 148 订阅 ¥29.90 ¥99.00

订阅专栏

本文详细介绍了HDFS中convertTemporaryToRbw方法的作用，该方法将Temporary副本转化为RBW副本。在DataNode接收完块数据且stage处于特定状态时触发。内容涵盖调用场景、方法实现细节以及与之相关的TEMPORARY副本创建和状态转换。

摘要由CSDN通过智能技术生成

一、背景

功能： 把一个temporary副本转换成RBW副本。
方法的参数： 正在被转换成Rbw状态的的Temporary状态副本。
调用场景： datanode接收一个块的数据完成时，如果stage处于BlockConstructionStage.TRANSFER_RBW，那么就需要把temporary副本转换成RBW类型副本。
注意点： TEMPORARY副本用ReplicaInPipeline类表示，处于TEMPORARY状态的副本是不可读的。TEMPORARY副本有自己的tmp目录，如果DataNode重启，会直接删除处于TEMPORARY状态的副本。

一般只有在客户端写数据发生pipeline recovery时，如果往pipeline里添加新的datanode节点，然后把已经写的块数据transfer到这个新添加到pipeline的datanode上时，才有可能会处于TRANSFER_RBW阶段或者TRANSFER_FINALIZED阶段，相应的方法调用链路是：addDatanode2Existi

了解本专栏