近日,UCloud宣布推出其自研的并行文件系统UPFS(UCloud Parallel File System),并引入ScaleFlux可计算存储解决方案,旨在解决企业在大规模数据存储方面面临的挑战,如高成本、低空间利用率和多样化业务需求。
UPFS:高性能文件系统应对企业痛点
UPFS是UCloud自主研发的并行文件系统,支持IB/RoCE网络,提供对数据百微秒级的访问和最高数百GB/s的读写吞吐,特别适用于AIGC、自动驾驶、EDA仿真、CG渲染等业务场景。UPFS采用多副本机制以确保数据可靠性,相较于纠删码,多副本性能更为优越,但却存在空间利用率偏低的问题。
ScaleFlux:创新技术实现低成本和高性能的平衡
UPFS选择引入ScaleFlux的可计算存储解决方案,主要基于以下亮点:
- 创新自研透明压缩技术: ScaleFlux的SFX 3000 SoC控制器实现了硬件层面的自动压缩,显著提升系统性能和驱动功能,无需引入复杂的软件更改,用户对此无感知。
- 卓越的性能和稳定性: 通过透明压缩技术,ScaleFlux优化了数据写入效率,大幅提升随机写和混合读写性能,同时保持时延平稳,减少性能抖动。
- 行业领先的安全性和可靠性: 实现硬件信任根,确保系统引导过程的可信性,同时通过超强纠错码应对存储介质的不确定因素,提高数据完整性和可靠性。
业务场景下的显著改进
随着ScaleFlux的可计算存储方案的引入,UPFS在业务场景中取得了明显的改进:
- AI训练: 实现高吞吐、低时延,为AI模型训练提供更加高效的存储支持。
- 渲染: 面对大文件和上百上千计算节点同时访问,提升文件系统读时延,从150us降至90us,极大提高渲染效率
- EDA仿真: 处理大量时序小文件,通过ScaleFlux实现数据的压缩功能,有效降低数据存储成本。
总体部署成本降低40%
随着ScaleFlux的引入,UPFS整体部署成本降低了40%,展现了低成本和高性能的完美平衡。这一合作为UPFS客户提供了更具竞争力的解决方案,助力企业在大规模数据存储方面迈出更为稳健的一步。
通过ScaleFlux与UCloud的卓越合作,企业不仅能够享受高性能文件存储的便利,还能实现成本的有效控制,为未来的发展奠定了坚实基础。