最后我们来分析一下数据流的关闭流程
FSDataInputStream::close的流程如下:
1. 实际调用的是DFSClient::DFSInputStream的close方法
2. 关闭blockReader,关闭socket
FSDataOutputStream::close的流程如下:
1. 实际是调用DFSOutputStream::close方法
2. 调用closeInternal,释放相关资源
a. 调用flushBuffer将Client缓存的数据打包成packet
b. 调用flushInternal将Client缓存的所有Packet发送到datanode,并收到所有的ack包,此时dataQueue和ackQueue的大小是0
c. 关闭BlockStreamer和ResponseProcessor线程
d. 通过blockStream向datanode写一个整数0,表明这是block的结束,然后关闭blockStream和blockReplyStream,以及socket
e. 调用namenode.complete结束改文件的打开状态
3. 调用leasechecker.remove(src),从客户端维护的的租约中去掉当前文件的租约
DistributedFileSystem::close的流程如下:
1. 删除以前标记delete-on-exit的文件
2. 调用DFSClient::close,关闭DFSClient
a. 关闭leasechecker
b. 停止和namenode的rpc通信