华三（H3C）交换机 RoCEv2 优化配置指南

于 2025-03-25 15:40:29 发布
阅读量876 收藏 9
点赞数 18
分类专栏： 网络架构与设计 文章标签： 服务器 运维 网络协议 网络
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/guganly/article/details/146504878
版权

华三（H3C）交换机 RoCEv2 优化配置指南

版本：1.0
更新日期：2025-XX-XX

1. 文档概述

本文档详细说明如何在华三（H3C）交换机上配置 RoCEv2（RDMA over Converged Ethernet v2） 及相关优化参数，包括 PFC（Priority Flow Control）、QoS 队列管理、死锁检测与恢复 等关键功能，确保 低延迟、零丢包 的高性能网络环境。

2. RoCEv2 关键配置

2.1 RoCEv2 监控与分析

netanalysis rocev2 mode bidir       # 启用双向流量监控（发送+接收）
netanalysis rocev2 drop global      # 全局启用丢包统计
netanalysis rocev2 statistics global # 全局启用流量统计（吞吐量、延迟等）

作用：

  • 监控 RoCEv2 流量的 丢包、延迟、乱序包，用于故障排查和性能优化。
  • <
最低0.47元/天 解锁文章
H3C交换机最详细配置实例手册
04-28
H3C交换机最详细配置实例手册
RoCEv2网络部署实践
老网工的岁月独白
03-09 4009
另外在VxLAN这样的overlay的网络中，我们必须还要考虑到内外层报文ECN的一致性，例如：Spine链路拥塞时ECN置位也只是在外层报文， 这就要求Leaf到接收端时先要将外层的ECN状态同步到内层报文，然后再剥离外层报文送到接收端侧。最后，很多时候无损网络部署时会将PFC和ECN同时部署，考虑到PFC可能的死锁等问题，一般发生拥塞时会首先触发ECN，使终端主动降速。队列调度：出向时，将不同标记的流量放到不同队列，通常信令类流量绝对优先，ROCEv2和普通流量加权重轮询调度，也就是SP+WRR。
【RDMA】无损网络和PFC（基于优先级的流量控制）|ECN
小鱼菜鸟的博客
07-22 3134
目录 前言 一、为什么会产生拥塞 二、PFC如何实现流控 三、PFC存在的问题 四、利用ECN实现端到端的拥塞控制 五、ECN交互过程 QC-QCN (网络工程师必会) (待续) PFC和ECN对比* 总结 PFC的水线设置 无损网络测试规范 网络要求 Ref 文档 @bandaoyu 持续更新，链接：https://...
RoCEv2网络部署----Mellanox网卡配置
老网工的岁月独白
11-01 9196
mlnx_qos -i ens1np0 -s ets,ets,ets,ets,ets,ets,strict,strict -t 10,10,10,50,10,10,0,0 设置出向队列调度，tc7，tc6严格优先级，tc0-5按权重轮询。mlnx_qos -i ens1np0 -f 0,0,0,1,0,0,0,0 开启priority 3 pfc。mlnx_qos -i ens1np0 -r 0,0,0,0,0,0,30,20 队列限速。设置队列3 PFC，后面打流测试让RoCEv2流量跑在队列3中，
运行 RoCEv2 的网络注意事项
m0_62973599的博客
12-30 3498
RDMA over Converged Ethernet (RoCE) 是一种网络协议，它利用远程直接内存访问 (RDMA) 功能来显着加速托管在服务器集群和存储阵列上的应用程序之间的通信。RoCE 结合了 IBTA RDMA 语义，允许设备在应用程序级别执行直接内存到内存传输，而无需主机 CPU。与基于软件的协议相比，传输处理和内存转换和放置均由硬件执行，从而显着降低延迟、提高吞吐量和提高性能。
H3C&思科&锐捷&盛科交换机如何配置RDMA（RoCE）流控？
qq_27815483的博客
06-24 3489
本文主要总结整理了华三（H3C）、思科（Cisco）、锐捷（ruijie）、盛科（Centec）交换机如何在交换端配置RDMA流控。
盛科交换机配置基于DSCP的RoCEv2-无损网络
网工格物的博客
02-04 1379
当前HPC高性能计算、分布式存储、AI人工智能等应用采用RoCEv2网络替代传统的TCP/IP网络，来降低CPU的处理和延迟，提升应用的性能。然而，这些分布式高性能应用的特点是“多打一”的Incast流量模型，对于以太交换机，Incast流量易造成交换机内部队列缓存的瞬时突发拥塞甚至丢包，将会带来应用时延的增加和吞吐的下降，从而损害分布式应用的性能。
科普文：软件架构网络系列之【RDMA技术实现之RoCEv2工作过程】
为无为，事无事，味无味。
10-29 1580
RDMA 之RoCEv2工作流程概述 下面将重点介绍示例应用将数据从客户端计算节点 (CCN) 的设备内存写入服务器计算节点 (SCN) 的设备内存时所涉及的过程，共分为四步： 1) 内存分配和注册、 2) 创建队列对、 3) 连接启动、 4) 从 CCN 和 SCN 的角度进行的写入操作。
某实验中心RDMA RoCE v2 网络实施（100G网络）
qq_29109843的博客
08-14 3159
QoS RoCE v2 Mellanox NVIDIA
【RDMA】无损网络 RoCE v2
tyzyumi的专栏
01-18 1069
QoS是一种机制，它给一个网络流赋予一个优先级，并且管理它的最低需求(guarantees)，极限能力(limitations)和它相比其他网络流的优先级服务。这是通过一个2/3阶段的过程将用户层的优先级映射到一个硬件层流量类(hardware Traffic Class)上实现的。流量类（traffic class）被赋予QoS属性(缓存分配，流控制，排队，调度，随机早期检测，显式拥塞通知等等)，并且不同的流按照这些对应的属性被服务。
Annex17_RoCEv2 (1).pdf
04-21
This document is an annex to Volume 1 release 1.2.1 of the InfiniBand Architecture, herein referred to as the base specification. This annex is Optional Normative, meaning that implementation of the feature described by this annex is Optional, but if present, the implementation must comply with the compliance statements contained within this annex. This specification follows the spirit of the RoCE Annex (Annex A16 to the base specification) in defining a new InfiniBand protocol variant that uses an IP network layer (with an IP header instead of InfiniBand‘s GRH) thus allowing IP routing of its packets.
RoCEv2和rdma标准文档
05-18
RoCEv2和rdma标准文档 This document is an annex to Volume 1 release 1.2.1 of the InfiniBand Architecture, herein referred to as the base specification. This annex is Optional Normative, meaning that implementation of the feature described by this annex is Optional, but if present, the implementation must comply with the compliance statements contained within this annex. This specification follows the spirit of the RoCE Annex (Annex A16 to the base specification) in defining a new InfiniBand protocol variant that uses an IP network layer (with an IP header instead of InfiniBand‘s GRH) thus allowing IP routing of its packets.
RDMA RoCEv2标准协议快速掌握.rar
03-17
详细分析介绍RDMA RoCEv2标准协议，报文格式，消息内容。原创总结InfiniBand Architecture Secification Volume1 Release 1.2.1 标准的关键点. 力求读者5分钟掌握RDMA标准。同时附有标准原文档，包括RoCEv2 标准。
RoCEv2 高性能传输协议与 Lossless 无损网络
最新发布
烟云的计算
02-22 1635
它是 DCB (Data Center Bridging）标准的一部分，用于将流量分配到不同的队列，为每个队列分配一个权重，控制每个流量队列能够使用的带宽百分比，保证高优先级的流量，如 RDMA 流量通常会分配足够的带宽资源。因此，一旦出现丢包，就只能采用 go back N 重传机制，比如：网络链路上已经发送了 1，2，3，4，5 个数据包，假如当 2 这包丢掉了，那么 3，4，5 这三个包都要重传，重传的成本非常大。如下图所示，一旦发生丢包重传，RDMA 的性能就会急剧下降。
华为交换机常用功能配置
basyn的专栏
05-22 3770
15.将文件“file-from-r1.bak”从R2下载到R1，并更名为“file-from-r2.bak”。13.使用display interface命令查看接口详细信息。15.R2配置为FTP服务器。16.删除R2上的文件“file-from-r1.bak”。11.设置空闲超时时间为20分钟，默认为10分钟。14.从R1使用Telnet方式登录到R2。尝试从R1用FTP工具登录到R2。19.显示当前生效的配置信息。18.显示以保存的配置文件。17.保存当前的配置文件。20.清除存储的配置文件。
科普文：软件架构网络系列之【RDMA技术实现：一文搞懂 RoCE v2】
为无为，事无事，味无味。
10-29 3737
为什么RoCE是目前主流的RDMA协议？ 先说iWARP，iWARP协议栈相比其他两者更为复杂，并且由于TCP的限制，只能支持可靠传输。所以iWARP的发展不如RoCE和Infiniband。 而Infiniband协议本身定义了一套全新的层次架构，从链路层到传输层，都无法与现有的以太网设备兼容。 举例来看，如果某个数据中心因为性能瓶颈，想要把数据交换方式从以太网切换到Infiniband技术，那么需要购买全套的Infiniband设备，包括网卡、线缆、交换机和路由器等等，成本太高.RoCE协议的优
RDMA 协议中的王者：RoCE v2网络，低延迟、高吞吐量！
网络技术联盟站
02-13 4027
RoCE（RDMA over Converged Ethernet）是一种基于以太网的远程直接内存访问协议，旨在通过以太网网络实现高性能、低延迟的数据传输。RoCE早期版本（RoCE v1）存在一些局限性，随着技术的不断发展，RoCE v2应运而生，弥补了先前版本的一些缺陷。远程直接内存访问（RDMA）是一种数据传输方式，它允许数据在不涉及主机CPU的情况下从一台计算机的内存传输到另一台计算机的内存。这种方式降低了传统TCP/IP协议栈的开销，提高了数据传输效率。
RoCEv2 无损队列缓存
老网工的岁月独白
06-17 2613
RoCE的技术方案是将以太网通过PFC和ECN的加持后进化成“无损网络”，用来支持在以太网上承载RDMA业务。 RDMA流量通过DSCP标记进入到以太网交换机的无损队列转发。无损队列和有损队列的重要区别就是其缓存的划分。 缓存空间存在于芯片中，芯片上的所有端口共用该芯片的缓存空间，端口上的所有队列共用该端口的缓存空间。缓存空间可以划分为芯片级、端口级、队列级。队列一般分为有损队列与无损队列。区别是无损队列多了Headroom缓存空间。无损队列的缓存空间 芯片级 1.Static Buffer 静态缓存是在芯
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

guganly

喜欢就请我喝杯咖啡吧！☕️

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值