StarGFS并行文件系统采用RDMA提升性能

一、需求和挑战

    

    传统的NAS网络存储系统，都是通过TCP/IP协议来传输数据。TCP/IP经过了几十年的发展，成熟可靠，但因为其主要运行在不可靠的物理链路并具有复杂的层次结构，一开始就有着性能方面的先天不足。网络数据包要经过网卡驱动、操作系统内核等软件模块的层层处理，才能被应用程序使用，时延较大；数据包也在内存中来回移动，消耗了大量资源。

    而如今服务器硬件配置越来越高，存储介质经常采用了带宽大时延低的NVMe SSD，虽然都能极大提升存储性能，但目前的性能瓶颈往往出现以太网络上。无论是带宽还是延时，常见网络设备和网络协议都无法满足人工智能等对性能有着苛刻要求的场景需要。

    RDMA全称为Remote Direct Memory Access，字面的意思就是远程直接访问内存。RDMA就是让一台计算机能够直接访问另外一台计算机的内存，无需操作系统参与，能让应用程序直接读写网络收发的数据，从而减少了内存拷贝操作，避免对数据的反复传输，对性能有巨大的提升作用。目前能支持RDMA技术的物理网络主要有Infiniband（简称IB）、Omni-Path和以太网。基于以太网的RDMA技术主要是ROCE。

二、星实StarGFS增加RDMA技术支持

    星实研发团队为StarGFS并行文件系统增加了RDMA技术的支持。在同样的硬件情况下，StarGFS并行文件系统基于RDMA技术的并发读写性能比TCP/IP模式快三倍以上，可以充分地发挥NVMe SSD的性能。

    星实推出StarGFS并行文件系统基于RDMA的高速网络和NVMe SSD高速存储介质的解决方案组合，特别适合人工智能、生命科学、气象分析、能源勘探、视频分析、金融量化、渲染农场等行业领域，以更高的聚合读写带宽、更低的读写延迟、更快的文件检索访问效率来提升整体数据处理效能。