2023：生成式AI与存储最新发展和趋势分析（下）

上海市计算机学会 存储专委 陈雪菲

上一篇关于生成式AI讨论得比较多，这一篇我们聊聊存储以及存储和AI的碰撞。

1. 存储新发展概述

        近两年存储领域最大的里程碑事件应该是闪存赢得过半市场，Gartner 连续几个季度的市场分析数据中也多次都确认了这一点，固态存储取代机械硬盘的趋势不可逆转。在这一大背景下，有三个新发展方向日益引起更多关注，分别是存储新介质，可计算存储（存算一体）和进一步的极致性能追求。

2．介质：

        Intel曾经用傲腾推动了介质层的革命，它在DRAM和SSD之间硬生生开创出SCM/PMem这一新层级，拓展了存储金字塔的层数。性能好延迟低耐擦写非易失，这种新型相变储存器除了贵和容量小几乎没有缺点。但2022年傲腾突然退出市场，形成了事实上的釜底抽薪，许多基于新介质的产品技术研究和生态都被晾在沙滩上。然而经过几年市场培育，需求的幼苗早就破土而出，已经成为一种客观存在，也留下了一个真空地带需要填补。对于产品的呼唤，业界传言了一年多的三星铠侠大普微或是其他厂商，到底谁能真正推出成熟替代来解决供需矛盾，是非常值得关注的。

        在替代产品出现之前，业界有两种思路解决此问题，一是重提NVDIMM（非易失内存模组）的路线，二是回归DRAM+SSD并重新设计软硬件架构，两者都非一蹴而就的简单工作。从硬件上看，NVDIMM-P/NVDIMM-H 都属于SCM，傲腾和NVDIMM-P设计也有相似之处，应该有所参照。但NVDIMM使用了DRAM，导致成本高昂，产品竞争力上有先天短板。其次如果回归DRAM+SSD方案，缓存机制和数据不丢失方案都需要重构，需要承担时间和产品成熟度风险。

3．存算一体

        严格来说，存算一体技术所依赖的可编程SSD不能归类到介质，但可以认为和介质绑定非常紧密。最近这几年，两种有趣的相反思路都同时存在：首先，存算一体/可计算存储/可编程SSD，都是“ offload”思路：把原本由主机侧负责的部分数据处理的计算负载主动卸载到存储端（包括智能网卡也都是如此），通过在靠近存储介质的地方加个ARM CPU或者干脆是FPGA来提供计算能力，也就是所谓的让计算靠近数据。它能完成的计算包括数据压缩，视频编解码，加解密等等IO密集型应用所需功能，目前在这个方向有很多参与者，是一个热点。

        另一种思路是把本来紧密集成在SSD介质侧的管控能力提到主机侧来处理，例子就是前两年业界广泛讨论的open channel SSD。原本是固化到FLASH主控芯片的功能，开放接口给主机侧，让主机侧根据自身应用负载特点，通过软件算法调整实现优化。实质上是把存储固件FTL的工作提到上层来完成，这样系统能够了解底层的情况，可以做文件系统软件和介质硬件的协同设计，用各种办法提高性能。这和前一种Offload思路形成了有趣的对照。

4．DNA存储

        个人兴趣而言，我觉得真正有意思的介质是DNA存储，它属于生物技术与信息技术的跨学科结合，BT+IT