PCIe系统中的ATS机制简介

元直数字电路验证

于 2025-05-30 01:31:23 发布

阅读量795

点赞数 22

分类专栏： PCIe/UCIe学习笔记文章标签： SoC MMU VMM

本文链接：https://blog.csdn.net/gsjthxy/article/details/148320811

版权

PCIe/UCIe学习笔记专栏收录该内容

17 篇文章

订阅专栏

PCIe系统中的ATS机制简介

摘要：在PCIe（Peripheral Component Interconnect Express）系统中，ATS（Address Translation Service）是一种重要的机制，用于支持虚拟化环境中的设备直接内存访问（DMA）操作。它主要解决的是在虚拟化场景下，虚拟机（VM）中的设备如何高效、安全地访问主机内存的问题。以下是对ATS的作用及原理的详细介绍：

一、ATS的作用

支持虚拟化中的DMA操作：
在虚拟化环境中，虚拟机运行在隔离的地址空间中，其内存地址（虚拟地址）与主机的物理地址（HPA，Host Physical Address）不同。传统的DMA操作需要设备直接访问物理内存，但虚拟机中的设备通常只知道虚拟地址（GVA，Guest Virtual Address）或虚拟机的物理地址（GPA，Guest Physical Address）。ATS通过地址翻译机制，使设备能够直接使用虚拟地址进行DMA操作，而无需主机或虚拟机管理程序（Hypervisor）频繁干预。
提高性能：
没有ATS时，DMA操作通常需要通过Hypervisor或IOMMU（Input-Output Memory Management Unit）进行地址翻译和数据拷贝，这种方式会引入额外的延迟和CPU开销。ATS允许设备直接与IOMMU交互，完成地址翻译，从而减少性能开销，提高I/O效率。
增强安全性：
ATS与IOMMU结合，确保设备只能访问经过授权的内存区域，防止未经授权的内存访问或越界操作，从而在虚拟化环境中保护主机和虚拟机的内存安全。
支持设备直通（Device Passthrough）：
在虚拟化中，设备直通是一种将物理设备直接分配给虚拟机使用的技术。ATS支持设备直通场景下的地址翻译，使得设备可以直接处理虚拟机的内存请求，而无需额外的软件层干预。

二、ATS的原理

ATS的核心是通过设备与IOMMU之间的协作，完成虚拟地址到物理地址的翻译。以下是其工作原理的详细步骤：

设备支持ATS：
设备需要支持ATS协议，这意味着设备能够发出带有虚拟地址的内存请求，并理解ATS相关的控制消息。支持ATS的设备通常会在其PCIe配置空间中声明ATS能力（ATS Capability Structure）。
地址翻译请求：
当设备需要访问内存时，它会发出一个ATS翻译请求（Translation Request），其中包含虚拟地址（通常是GPA或GVA，具体取决于虚拟化设置）。这个请求通过PCIe总线发送到IOMMU。
IOMMU处理翻译：
IOMMU接收到翻译请求后，会根据其内部的页表（通常是与虚拟机的内存映射相关的二级页表）将虚拟地址翻译为实际的物理地址（HPA）。IOMMU的页表是由Hypervisor配置的，映射关系基于虚拟机的内存分配。
翻译结果返回：
IOMMU将翻译后的物理地址（或翻译失败的错误信息）通过ATS响应消息返回给设备。设备收到响应后，可以使用物理地址直接进行DMA操作，或者根据错误信息采取相应措施。
缓存翻译结果（ATC）：
ATS通常与ATC（Address Translation Cache）结合使用。设备内部可以缓存之前收到的翻译结果（类似TLB，Translation Lookaside Buffer），从而避免对同一地址反复发起翻译请求，进一步提高性能。ATC的缓存内容由设备管理，但IOMMU或Hypervisor可以通过失效消息（Invalidation Message）通知设备更新或清除缓存，以确保地址映射的一致性。
权限检查：
在翻译过程中，IOMMU还会检查设备的访问权限，确保请求的地址在设备被授权的范围内。如果权限检查失败，IOMMU会拒绝翻译请求并返回错误响应，防止非法访问。

三、ATS的工作流程示例

假设一个虚拟机中的网卡设备需要通过DMA将数据写入虚拟机的内存：

网卡设备发出一个ATS翻译请求，包含目标虚拟地址（GPA）。
请求通过PCIe总线到达IOMMU。
IOMMU根据虚拟机的页表将GPA翻译为HPA，并检查访问权限。
IOMMU将翻译结果（HPA）返回给网卡设备。
网卡设备将HPA缓存到其ATC中，并使用该地址执行DMA写操作。
如果后续操作涉及相同的虚拟地址，网卡设备直接从ATC获取HPA，无需再次请求翻译。

四、ATS的关键特性

低延迟：通过设备与IOMMU的直接交互，减少了软件层的介入。
高效率：ATC机制减少了重复翻译的开销。
安全性：结合IOMMU的权限控制，防止设备访问未经授权的内存。
兼容性：ATS是PCIe规范的一部分，支持ATS的设备和IOMMU需要符合PCIe ATS扩展规范。

五、ATS与相关技术的关系

IOMMU：ATS依赖于IOMMU进行实际的地址翻译和权限管理。IOMMU是ATS机制的核心组件。
VT-d / AMD-Vi：这些是Intel和AMD的IOMMU实现，支持ATS功能。
PRI（Page Request Interface）：ATS通常与PRI结合使用，PRI允许设备在翻译失败时请求Hypervisor分配新的页表项，进一步增强虚拟化支持。

六、总结

ATS在PCIe系统中通过设备与IOMMU的协作，实现了虚拟化环境中高效、安全的地址翻译，为虚拟机中的设备直接访问内存提供了支持。它通过减少软件干预、缓存翻译结果和权限检查，显著提升了I/O性能和系统安全性，尤其在设备直通和虚拟化场景中发挥了重要作用。对于从事芯片验证、虚拟化技术或高性能计算领域的工作，理解ATS的原理和实现对设计和验证支持虚拟化的SoC系统至关重要。