服务器高可用实现文档 百度网盘,分布式文件系统元数据服务器高可用设计与实现...

摘要：

伴随全球数据量的飞速增长和数据密集型应用的不断增加,分布式文件系统得到越来越广泛的应用.目前主流的分布式文件系统均采用将元数据与数据分离管理的机制,将命名空间和文件元数据保存在元数据节点,而数据保存在数据节点.很显然,元数据节点的高可用是决定分布式存储系统的可用性的关键因素. 本文对分布式文件系统中的元数据高可用性技术进行了全面.深入研究,并在此基础上设计和实现了BlueOcean分布式文件系统元数据服务器高可用方案.本文的主要工作如下: (1)研究了分布式文件系统中元数据管理的关键问题,包括文件系统元数据职责.分布式元数据管理方式.命名空间分布策略等; (2)研究了可用性相关知识及常用高可用系统组织模式,将不同的高可用组织模式对系统性能及恢复时间的影响进行了比较; (3)研究了提高分布式文件系统元数据服务器可用性的关键技术,设计并实现了碧海分布式文件系统元数据服务器高可用方案,在设计过程中对元数据复制.服务器状态监测.失败确认及接管.节点恢复后的处理等关键问题进行了详细分析; (4)对实现后的高可用系统设计了实验方案进行了测试.结果表明,该高可用设计方案对元数据操作性能和系统整体性能影响都比较小,且在进行大文件访问时性能影响可以忽略;系统可在元数据服务器异常停机后的一分钟时间里完成系统服务的恢复.

展开