【配置CDH和管理服务】关闭DataNode前HDFS的调优

配置CDH和管理服务

关闭DataNode前HDFS的调优

角色要求：配置员、集群管理员、完全管理员

 

当一个DataNode关闭，NameNode确保每一个DataNode中的每一个块根据复制系数（the replication factor）跨集群仍然是可用的。这个过程涉及到DataNode间小批次的块复制。在这种情况下，一个DataNode有成千上万个块，关闭后集群间还原备份数可能需要几个小时。关闭DataNode的主机之前，你应该首先调整HDFS：

 

1、提高DataNode的堆栈大小。DataNode应该至少有4 GB的堆栈大小，以允许迭代的增加和最大的流

    a、去HDFS服务页面；

    b、单击配置（Configuration）选项卡；

    c、在每个DataNode角色组（DataNode默认组和额外的DataNode角色组）去资源管理（ResourceManagement）类别，并设置DataNode的