libhdfs源码分析(5)

最后我们来分析一下数据流的关闭流程


FSDataInputStream::close的流程如下:
1. 实际调用的是DFSClient::DFSInputStream的close方法
2. 关闭blockReader,关闭socket


FSDataOutputStream::close的流程如下:
1. 实际是调用DFSOutputStream::close方法
2. 调用closeInternal,释放相关资源
a. 调用flushBuffer将Client缓存的数据打包成packet
b. 调用flushInternal将Client缓存的所有Packet发送到datanode,并收到所有的ack包,此时dataQueue和ackQueue的大小是0
c. 关闭BlockStreamer和ResponseProcessor线程
d. 通过blockStream向datanode写一个整数0,表明这是block的结束,然后关闭blockStream和blockReplyStream,以及socket
e. 调用namenode.complete结束改文件的打开状态
3. 调用leasechecker.remove(src),从客户端维护的的租约中去掉当前文件的租约


DistributedFileSystem::close的流程如下:
1. 删除以前标记delete-on-exit的文件
2. 调用DFSClient::close,关闭DFSClient
a. 关闭leasechecker
b. 停止和namenode的rpc通信

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值