Datanode 源码剖析

DatanodeProtocol namenode = null;//与NN通信的ipc客户端类
FSDatasetInterface data = null;//管理一系列的数据块，所有和数据块相关的操作，都在FSDataset相关的类中进行处理。
DatanodeRegistration dnRegistration = null;//DN向NN的注册信息，包含名字(dn机名:dfs.datanode.address口),info的http端口,ipc的端口等

LinkedList<Block> receivedBlockList = new LinkedList<Block>();//已经接收的数据块,定期通知namenode接收完毕时，会移除
Map<Block, Block> ongoingRecovery = new HashMap<Block, Block>();//在其他DataNode的数据块副本损坏或丢失时会使用
LinkedList<String> delHints = new LinkedList<String>(); //需要删除的块，在定期通知nn后，会移除

Daemon dataXceiverServer = null;//用于读写数据的服务器，接收客户端和其他DN的请求，端口是dfs.datanode.address
Server ipcServer; //内部dn调用的ipc服务器，用于客户端,端口是dfs.datanode.ipc.address
long blockReportInterval;//数据块报告周期,默认是60*60秒，即一个小时
long lastBlockReport = 0;//记录最近的数据块报告时间，与blockReportInterval联合使用

long lastHeartbeat = 0;//记录最近和namenode的心跳时间
long heartBeatInterval;//和namenode的心跳周期，默认是3s
DataStorage storage = null;//DataStorage提供了format方法，用于创建DataNode上的Storage，还有如下操作：doUpgrade/doRollback/doFinalize。同时，利用StorageDirectory，DataStorage管理存储系统的状态。
HttpServer infoServer = null;//查看DataNode状态信息的http服务器,端口是dfs.datanode.http.address
DataBlockScanner blockScanner = null;//检测它所管理的所有Block数据块的一致性

Daemon blockScannerThread = null;