NVMe Over Fabrics架构概述

NVMe Over Fabrics使用RDMA或光纤通道（FC）架构等Fabric技术取代PCIe传输。如图所示，除了基于RDMA架构的传输包括以太网（ROCE），InfiniBand和iWARP，当然，采用基于原生TCP（非RDMA）传输也是可能的（截至2018年7月，TCP技术仍在研发阶段）。

图RDMA和FC Fabric NVMe架构

图中所示的NVM子系统是一个或多个物理结构接口（端口）的集合，每个单独的控制器通常连接到单个端口。多个控制器可以共享一个端口。尽管允许NVM子系统的端口支持不同的NVMe传输，但实际上，单个端口可能仅支持单个传输类型。

注意：NVM子系统包括一个或多个控制器，一个或多个命名空间，一个或多个PCI Express端口，非易失性存储器存储介质，以及控制器和非易失性存储器存储介质之间的接口。

下图是一个存储阵列的示例，该阵列是由通过FC结构连接到3个主机的NVM子系统组成。

图：由通过Fabric连接到3个主机的NVM子系统组成的示例阵列

通常，NVM子系统呈现一个或多个NVMe控制器（最大约64K）的集合，其用于通过一个或多个（最多64K）NVM子系统端口访问与一个或多个主机相关联的命名空间。实际上，子系统控制器的数量或子系统端口的数量往往非常小。

NVMe Over Fabrics（NVMe-oF）也是基于NVMe架构，包括命令集和排队接口。除Admin和I/O命令外，它也支持Fabric命令。NVMe-oF在某些方面与基本NVMe规范有所不同（例如，不允许中断）,因为NVMe中的Interrupt的说法，仅仅限于NVMe over PCIe的架构，在NVMe over Fabric的架构下，不存在任何Interrupt的说法。

注意：有关NVMeover Fabrics与NVMe基本规范之间差异的完整列表，请参阅NVMe Over Fabric 1.0规范

控制器一次只与一个主机关联，而端口可以共享。NVMe允许主机通过相同的端口或不同的端口连接到NVM子系统中的多个控制器。

NVMe-oF支持发现服务，使用发现机制，主机可以获得具有主机可访问的名称空间的NVM子系统的列表，包括发现到NVM子系统的多个路径的能力。NVMe Identify Admin命令用于确定控制器的命名空间。

如前所述，NVMe规范支持多路径I/O和命名空间共享。虽然多路径I / O，命名空间共享，多主机连接和预留等概念并不相同，但为了方便将它们一起描述，它们在涉及多主机命名空间访问，尤其是在使用NVMe预订(Reservations)时有些相互关联。以下提供了这些概念的简要说明。

命名空间共享

命名空间共享是指两个或多个主机使用不同的NVMe控制器访问公共命名空间的能力。命名空间共享要求NVM子系统包含两个或更多控制器。

下图显示了两个NVMe控制器通过两个NVM子系统端口连接的示例; 在此示例中，命名空间B（NS B）由两个控制器共享。NVMe操作可用于协调对共享命名空间的访问。与共享命名空间相关联的控制器可以同时在命名空间上操作。可以使用全局唯一标识符或与命名空间本身关联的命名空间ID（NSID）来确定何时存在到同一共享命名空间的多个路径。

NVM子系统不需要将相同的命名空间附加到所有控制器。在图中，只有命名空间B被共享并连接到控制器。

注：当前的NVMe规范未指定跨NVM子系统的命名空间共享，这在NVMe 1.4规范草案中得到了解决。

图：具有对共享命名空间的专用端口访问的示例

多路径