【RDMA】RDMA技术详解（二）：Send Receive操作

最新推荐文章于 2024-07-19 19:07:58 发布

bdview

最新推荐文章于 2024-07-19 19:07:58 发布

阅读量274

点赞数 1

文章标签：队列 java linux python 嵌入式

本文链接：https://blog.csdn.net/weixin_42319496/article/details/119371329

版权

本文详细介绍了RDMA（远程直接内存访问）技术，强调其低延迟、高吞吐量和低CPU占用的优势。通过RDMA Verbs API，利用Queue Pairs（QP）进行异步通信，包括Send和Receive工作请求。文章通过步骤解析了数据在两个系统间如何通过工作队列（WQ）和完成队列（CQ）进行传输，展示了RDMA如何实现高效的数据搬运。

摘要由CSDN通过智能技术生成

原文：https://blog.csdn.net/qq_21125183/article/details/86525012

英文：https://zcopy.wordpress.com/2010/10/08/quick-concepts-part-1-%E2%80%93-introduction-to-rdma/

1. 前言

RDMA指的是远程直接内存访问，这是一种通过网络在两个应用程序之间搬运缓冲区里的数据的方法。RDMA与传统的网络接口不同，因为它绕过了操作系统。这允许实现了RDMA的程序具有如下特点：

绝对的最低时延

最高的吞吐量

最小的CPU足迹 (也就是说，需要CPU参与的地方被最小化)

2. RDMA Verbs操作

使用RDMA, 我们需要有一张实现了RDMA引擎的网卡。我们把这种卡称之为HCA(主机通道适配器)。适配器创建一个贯穿PCIe总线的从RDMA引擎到应用程序内存的通道。一个好的HCA将在导线上执行的RDMA协议所需要的全部逻辑都在硬件上予以实现。这包括分组，重组以及流量控制和可靠性保证。因此，从应用程序的角度看，只负责处理所有缓冲区即可。

在RDMA中我们使用内核态驱动建立一个数据通道。我们称之为命令通道(Command Channel)。使用命令通道，我们能够建立一个数据通道(Data Channel)，该通道允许我们在搬运数据的时候完全绕过内核。一旦建立了这种数据通道，我们就能直接读写数据缓冲区。

建立数据通道的API是一种称之为"verbs"的API。“verbs” API是由一个叫做OFED的Linux开源项目维护的。在站点www.openfabrics.org上，为Windows WinOF提供了一个等价的项目。“verbs” API跟你用过的socket编程API是不一样的。但是，一旦你掌握了一些概念后，就会变得非常容易，而且在设计你的程序的时候更简