RDMA 协议中的王者：RoCE v2网络，低延迟、高吞吐量！

最新推荐文章于 2025-02-22 10:45:05 发布
最新推荐文章于 2025-02-22 10:45:05 发布
阅读量4k 收藏 21
点赞数 20
分类专栏： 网络技术 文章标签： RDMA RoCE
未经授权，禁止转载
本文链接：https://blog.csdn.net/weixin_43025343/article/details/136106425
版权
本文介绍了RoCEv2，一种基于以太网的高性能远程直接内存访问协议，着重讨论了其基本特性、工作原理、与传统网络的比较以及在数据中心环境中的部署和管理。RoCEv2通过优化网络层、多队列支持和硬件加速，提升了数据传输效率和低延迟性能。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

RoCE（RDMA over Converged Ethernet）是一种基于以太网的远程直接内存访问协议，旨在通过以太网网络实现高性能、低延迟的数据传输。RoCE早期版本（RoCE v1）存在一些局限性，随着技术的不断发展，RoCE v2应运而生，弥补了先前版本的一些缺陷。

远程直接内存访问（RDMA）是一种数据传输方式，它允许数据在不涉及主机CPU的情况下从一台计算机的内存传输到另一台计算机的内存。这种方式降低了传统TCP/IP协议栈的开销，提高了数据传输效率。RoCE v2作为一种基于RDMA的协议，继承了RDMA的优势并在以太网上进行了优化。

RoCE v2的基本特性

  • IPv4和IPv6支持：RoCE v2不仅支持IPv4，还在协议设计上增加了对IPv6的支持，使其更加适用于未来网络的发展趋势。
  • 多队列支持：RoCE v2引入了多队列支持，使网络能够更好地处理并发请求，提高了网络的吞吐量和并发性能。
  • 硬件无关性：RoCE v2具有硬件无关性&#
了解本专栏 订阅专栏 解锁全文 超级会员免费看
华三（H3C）交换机 RoCEv2 优化配置指南
guganly的专栏
03-25 842
本文档基于华三交换机通用配置，具体实现可能因设备型号、软件版本略有差异，请以官方文档为准。本文档详细说明如何在华三（H3C）交换机上配置。及相关优化参数，包括。
科普文：软件架构网络系列之【RDMA技术实现：一文搞懂 RoCE v2】
为无为，事无事，味无味。
10-29 3704
为什么RoCE是目前主流的RDMA协议？ 先说iWARP，iWARP协议栈相比其他两者更为复杂，并且由于TCP的限制，只能支持可靠传输。所以iWARP的发展不如RoCE和Infiniband。 而Infiniband协议本身定义了一套全新的层次架构，从链路层到传输层，都无法与现有的以太网设备兼容。 举例来看，如果某个数据中心因为性能瓶颈，想要把数据交换方式从以太网切换到Infiniband技术，那么需要购买全套的Infiniband设备，包括网卡、线缆、交换机和路由器等等，成本太高.RoCE协议的优
RoCEv2 高性能传输协议与 Lossless 无损网络
最新发布
烟云的计算
02-22 1600
它是 DCB (Data Center Bridging）标准的一部分，用于将流量分配到不同的队列，为每个队列分配一个权重，控制每个流量队列能够使用的带宽百分比，保证高优先级的流量，如 RDMA 流量通常会分配足够的带宽资源。因此，一旦出现丢包，就只能采用 go back N 重传机制，比如：网络链路上已经发送了 1，2，3，4，5 个数据包，假如当 2 这包丢掉了，那么 3，4，5 这三个包都要重传，重传的成本非常大。如下图所示，一旦发生丢包重传，RDMA 的性能就会急剧下降。
RDMA RoCEv2标准协议快速掌握.rar
03-17
详细分析介绍RDMA RoCEv2标准协议，报文格式，消息内容。原创总结InfiniBand Architecture Secification Volume1 Release 1.2.1 标准的关键点. 力求读者5分钟掌握RDMA标准。同时附有标准原文档，包括RoCEv2 标准。
某实验中心RDMA RoCE v2 网络实施（100G网络）
qq_29109843的博客
08-14 3132
QoS RoCE v2 Mellanox NVIDIA
【RDMA】无损网络 RoCE v2
tyzyumi的专栏
01-18 1058
QoS是一种机制，它给一个网络流赋予一个优先级，并且管理它的最低需求(guarantees)，极限能力(limitations)和它相比其他网络流的优先级服务。这是通过一个2/3阶段的过程将用户层的优先级映射到一个硬件层流量类(hardware Traffic Class)上实现的。流量类（traffic class）被赋予QoS属性(缓存分配，流控制，排队，调度，随机早期检测，显式拥塞通知等等)，并且不同的流按照这些对应的属性被服务。
RoCEv2和rdma标准文档
05-18
RoCEv2和rdma标准文档 This document is an annex to Volume 1 release 1.2.1 of the InfiniBand Architecture, herein referred to as the base specification. This annex is Optional Normative, meaning that implementation of the feature described by this annex is Optional, but if present, the implementation must comply with the compliance statements contained within this annex. This specification follows the spirit of the RoCE Annex (Annex A16 to the base specification) in defining a new InfiniBand protocol variant that uses an IP network layer (with an IP header instead of InfiniBand‘s GRH) thus allowing IP routing of its packets.
RoCEv2网络部署----Mellanox网卡配置
老网工的岁月独白
11-01 9131
mlnx_qos -i ens1np0 -s ets,ets,ets,ets,ets,ets,strict,strict -t 10,10,10,50,10,10,0,0 设置出向队列调度，tc7，tc6严格优先级，tc0-5按权重轮询。mlnx_qos -i ens1np0 -f 0,0,0,1,0,0,0,0 开启priority 3 pfc。mlnx_qos -i ens1np0 -r 0,0,0,0,0,0,30,20 队列限速。设置队列3 PFC，后面打流测试让RoCEv2流量跑在队列3中，
RoCE、softRoCE与iWRAP
weixin_34368949的博客
06-15 750
RoCE - RDMA over Converged Ethernet 以太网在全球互联的广域网中毫无异议的老大，但在高带宽、低延时的专有网络领域却明显混不开。伴随网络融合概念兴起，IETF发布了DCB标准，RDMA/Infiniband依赖的无损链路得以解决，以太网可以在专有网络领域内也占有一席之地了，所以RoCE – RDMA Over Converged Ethernet就顺势而生...
RDMA RoCev2 CM建链和Socket建链测试
jacicson1987的专栏
07-11 3952
RDMA在高性能计算，AI大模型训练中发挥着重要的作用。主流支持RDMA的协议有IB、RoCev1、RoCev2、iWARP。其中RoCev2是应用最广泛的协议，因为其RDMA over UDP/IP，不依赖昂贵的IB网络设备，同时支持路由，性能上也接近原生IB水准。
Nvidia_Mellanox_CX5和6DX系列网卡_RDMA_RoCE_无损和有损_DCQCN拥塞控制等技术简介-一文入门RDMA和RoCE有损无损 rdma rocev2 无损 有损
ssbandjl的博客
07-23 5220
随着互联网, 人工智能等兴起, 跨机通信对带宽和时延都提出了更高的要求, RDMA技术也不断迭代演进, 如: RoCE(RDMA融合以太网)协议, 从RoCEv1 -> RoCEv2, 以及IB协议, Mellanox的RDMA网卡cx4, cx5, cx6/cx6DX, cx7等, 本文主要基于CX5和CX6DX对RoCE技术进行简介, 一文入门RDMA和RoCE有损及无损关键技术RoCE: RDMA融合以太网, 继承RDMA所有的优势WQE: 工作队列元素, 可发音(wuki)CQE: 完成队列元素,
Annex17_RoCEv2 (1).pdf
04-21
This document is an annex to Volume 1 release 1.2.1 of the InfiniBand Architecture, herein referred to as the base specification. This annex is Optional Normative, meaning that implementation of the feature described by this annex is Optional, but if present, the implementation must comply with the compliance statements contained within this annex. This specification follows the spirit of the RoCE Annex (Annex A16 to the base specification) in defining a new InfiniBand protocol variant that uses an IP network layer (with an IP header instead of InfiniBand‘s GRH) thus allowing IP routing of its packets.
RDMA over TCP的协议栈工作过程浅析
peter_cloud的专栏
01-04 1105
随着网络带宽和速度的发展和大数据量数据的迁移的需求，网络带宽增长速度远远高于处理网络流量时所必需的计算节点的能力和对内存带宽的需求，数据中心网络架构已经逐步成为计算和存储技术的发展的瓶颈，迫切需要采用一种更高效的数据通讯架构。 　　传统的TCP/IP技术在数据包处理过程中，要经过操作系统及其他软件层，需要占用大量的服务器资源和内存总线带宽，所产生严重的延迟来自系统庞大的开销、数据在系统内存、
科普文：软件架构网络系列之【RDMA技术实现之RoCEv2工作过程】
为无为，事无事，味无味。
10-29 1573
RDMA 之RoCEv2工作流程概述 下面将重点介绍示例应用将数据从客户端计算节点 (CCN) 的设备内存写入服务器计算节点 (SCN) 的设备内存时所涉及的过程，共分为四步： 1) 内存分配和注册、 2) 创建队列对、 3) 连接启动、 4) 从 CCN 和 SCN 的角度进行的写入操作。
RDMA RoCEv2标准协议快速掌握
gitblog_09798的博客
09-06 506
RDMA RoCEv2标准协议快速掌握 RDMARoCEv2标准协议快速掌握.rar项目地址:https://gitcode.com/open-source-toolkit/18d77 资源介绍 本仓库提供了一个名为“RDMA RoCEv2标准协议快速掌握.rar”的资源文件，该文件详细分析和介绍了RDMA（远程直接内存访问）RoCEv2（RDMA over Converged Ethernet...
RoCE网络
热门推荐
老网工的岁月独白
10-19 1万+
什么是RDMA RDMA(远程直接数据存取)就是为了解决网络传输中服务器端数据处理的延迟而产生的，无需使用CPU，就可以从一个主机或服务器的内存直接访问另一主机或服务器的内存。它释放了CPU去执行其应做的工作，比如运行应用程序和处理大量数据。这既提高了带宽又降低了延迟、抖动和 CPU 消耗。 RDMA与TCP/IP模式示意图。对比传统的网络传输机制，RDMA无需操作系统和TCP/IP协议栈的介入。RDMA的内核旁路机制，允许应用与网卡之间的直接数据读写，将服务器内的数据传输时延降低到1us以下。同时，RD
【RDMA】RoCEv2 数据包研究|RoCE和RRoCE
小鱼菜鸟的博客
06-04 2191
目录 RoCE和RRoCE 一、数据组成 UC send RoCE RC send RoCE RRoCE 二、各部分组成详细 UC send 详细 RoCE RC send 详细 RoCE RRoCE 三、mellonx如何设置RoCEv1和RoCEv2 RoCE和RRoCE RRoCE =Routable Ro...
[RoCE]RDMA over Converged Ethernet模式以及配置
weixin_30673715的博客
03-14 1741
[阅读本文之前需要现有RDMA的基础知识] 1.RDMA over Converged Ethernet(RoCE) Remote Direct Memory Access(RDMA)是一种远程内存管理能力，允许不同服务器上应用的内存之间直接移动数据，不需要CPU的干预。RoCE是一种机制，它提供了在无损以太网络上极低延迟的高效数据传输。 随着数据中心朝着可靠以太网发展，搭载RoCE的CX系列...
RoCEv2网络部署实践
老网工的岁月独白
03-09 3991
另外在VxLAN这样的overlay的网络中，我们必须还要考虑到内外层报文ECN的一致性，例如：Spine链路拥塞时ECN置位也只是在外层报文， 这就要求Leaf到接收端时先要将外层的ECN状态同步到内层报文，然后再剥离外层报文送到接收端侧。最后，很多时候无损网络部署时会将PFC和ECN同时部署，考虑到PFC可能的死锁等问题，一般发生拥塞时会首先触发ECN，使终端主动降速。队列调度：出向时，将不同标记的流量放到不同队列，通常信令类流量绝对优先，ROCEv2和普通流量加权重轮询调度，也就是SP+WRR。
iser roce v2
06-06
iser roce v2是InfiniBand的一种技术，它是通过在RDMA（远程直接存储器访问）网络中实现高性能数据传输而得到的。RDMA是一种数据复制技术，它用于将数据从一台计算机快速传输到另一台计算机，而不同于其他方法，RDMA不需要CPU的参与。 ISER是InfiniBand Storage Protocol的缩写，它为InfiniBand设备之间的存储通讯提供了一种标准协议，从而支持高效、低延迟的数据传输。相对于以太网，ISER使用RDMA技术，具有更低的延迟和更高的带宽，因此被广泛应用于高性能计算、虚拟化和云计算等领域。 ROCE（RDMA over Converged Ethernet）是一种将RDMA移植到以太网的协议，ROCE V2是ROCE的第二代协议，相对于ROCE V1，它提供了更加高效的RDMA数据传输和更好的兼容性，同时支持多队列和多路径，提高了网络的吞吐量和可靠性。ROCE V2还支持与InfiniBand之间的互操作性，因此成为了数据中心网络的一个重要选择。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

wljslmz

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值