基于KVM两个RDMA端口通信测试 - RoCE传输模式下

已于 2024-01-24 18:57:45 修改
阅读量602 收藏 11
点赞数 9
文章标签： 服务器 linux 网络
于 2024-01-24 18:57:28 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/redhat7890/article/details/135829260
版权
本文介绍了如何通过在KVM环境中使用RDMA的RoCE技术，验证两个节点(node1和node2)之间的通信。首先确保集群网络连通性，然后通过`ib_send_bw`命令行工具在服务器端和服务端客户端进行带宽测试，以检查连接性和性能。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

目的

为验证KVM的RDMA两个节点node1 - node2之间能正常RoCE通信传输，检查三个nodes的集群网，能ping通是测试继续的基础条件

验证步骤

Server和Client进行 ib_send_bw命令行检验，启动server端等待Client的链接，使用带宽测试的参数，只确定连通性。

服务端 node 执行

 ib_sent_bw -a -c UD -d mlx5_0 -i 1

客户端 node

ib_send_bw -a -c UD -d mlx5_0 -i 1 10.20.2.22

redhat7890
关注
RDMA 出现背景、如何实现？如何测试连通性？
郑泽林
12-24 1958
文章目录一、背景：1、传统的 网络通信：2、传统网络通信的问题：二、RDMA :1、出现背景：2、RDMA 简介：3、如何工作：4、RDMA 与 Infiniband 的关系：5、支持 RDMA 的其他协议：6、RDMA 的优势：7、通过 Infiniband 实现 RDMA ：8、如何测试 RDMA 连通性：   一、背景： 1、传统的 网络通信：     &n...
使用GFS集群部署KVM虚拟化平台(实例!!!)
ZT云的博客
12-21 738
实验环境 4台GFS节点服务器做GlusterFS集群,提供存储服务给KVM客户端做虚拟化 服务器角色 IP地址 磁盘空间 gfs-node1 192.168.142.152 40G+40G gfs-node2 192.168.142.154 40G+40G gfs-node3 192.168.142.162 40G+40G gfs-node4 192.168.142....
RDMA 常用测试命令(server/client)
mounter625的专栏
03-10 2304
#bandwidth echo "ib_send_bw" ib_send_bw -n 10000 -d irdma1 -i 1 -F --report_gbits --use_old_post_send -I 96 > /dev/NULL & sleep 3 ib_send_bw -n 10000 -d irdma1 -i 1 -F --report_gbits --use_old_post_send -I 96 192.168.1.2 sleep 3 echo "ib_read_bw" ib
RDMA测试集：preftest安装与使用
Eddy的博客
12-06 9383
perftest是一组基于uverbs编写的测试程序，是RDMA性能相关的benchmark。可用于软硬件调优以及功能测试。
RDMA在KVM实现条件
独自陶醉
01-24 1624
的输出中，每个网络接口都可能包含多个 GID（Global Identifier），每个 GID 表示一个全局唯一标识符，用于唯一标识 InfiniBand 网络中的节点或端口。其中，每个 GID 都会指定一个协议版本，如 RoCE v1 或 RoCE v2。centos8.4自带qemu版本4.2.0，BVT环境已升级至8.0.2，且QEMU需要重新编译。我们把SR-IOV创建出的虚拟网卡称为VF，如下命令可以查看网卡物理端口。我们把SR-IOV创建出的虚拟网卡称为VF，如下命令可以查看网卡物理端口。
精通 KVM 虚拟化（二）
龙哥盟
07-29 555
与网络不同，大多数 IT 人员至少对网络有基本的了解，而存储往往是完全不同的。简而言之，是的，它往往更加复杂。涉及许多参数、不同的技术，而且……坦率地说，有许多不同类型的配置选项和强制执行这些选项的人。还有很多问题。以下是其中一些：我们应该为每个存储设备配置一个 NFS 共享还是两个？我们应该为每个存储设备创建一个 iSCSI 目标还是两个？我们应该创建一个 FC 目标还是两个？每个逻辑单元号LUN）每个目标应该有多少个？我们应该使用何种集群大小？我们应该如何进行多路径处理？
VMware vSphere五种RDMA应用模型
追寻神迹
04-25 2954
VMware vSphere五种RDMA应用模型 2013-03-27 17:07:48    点击：19   字号：大 中 小 　　RDMA(remotedirectmemoryaccess)是一种远程内存直接访问技术。RDMA可以在不需要操作系统干预下，完成两个主机之间内存数据传输。RDMA技术具有IO延迟低，带宽性能高，主机CPU负载低的特点。vSphere是VMware虚拟化核
RDMA与传统网络通信深度对比：分析性能优势及应用场景
RDMA技术作为一种革新性的数据传输技术，正逐渐成为提升网络通信性能的关键技术。本论文首先对RDMA技术进行了全面的概述，并与传统网络通信机制进行了对比，突出了RDMA在减少CPU和内存使用、降低延迟以及提高吞吐量...
【MLNX-OFED深度剖析】：掌握Mellanox RDMA在最新文档中的关键应用
Mellanox RDMA技术作为高速网络通信的关键，对于数据中心和高性能计算环境的性能提升至关重要。本文首先介绍了Mellanox RDMA技术的基本概念和MLNX-OFED的安装与配置要点，包括软件包的获取、安装步骤、网络接口的...
【云平台低延迟秘籍】：虚拟化环境下的RDMA应用实践
RDMA（远程直接内存访问）技术因其在数据传输上的低延迟和高吞吐量优势，已被广泛应用于高性能计算和大数据处理领域。本文首先介绍了RDMA技术的原理及其在虚拟化环境下的配置方法，包括软硬件需求和配置步骤。其次，...
IB(InfiniBand网卡性能测试结果)
05-15
InfiniBand网卡的性能测试结果,可以得到当前最快的InfiniBand网卡的性能指标。
【RDMA技术快速入门】：Mellanox ConnectX-2网卡的10分钟激活指南
本文主要介绍RDMA（Remote Direct Memory Access）技术的基本原理、硬件平台和应用场景。第一章简要介绍了RDMA技术的应用背景和发展趋势。第二章详细探讨了Mellanox ConnectX-2网卡的硬件特性。第
【RDMA与虚拟化实战】：在虚拟化世界中部署Mellanox RDMA的最佳策略
本文首先概述了RDMA技术及其在虚拟化环境中的应用，随后详细解析了Mellanox RDMA技术的原理和优势，以及它与虚拟化技术的关系。接着，文章深入讨论了如何在虚拟化环境中有效部署和配置Mellanox RDMA，包括所需的硬件...
Infiniband 网络性能测试
zerotoall的博客
05-06 3347
Infiniband 网络性能测试，内含网卡绑定cpu中断号的方法
Ceph Async RDMA网络通信性能优化
国产CAx(CAD/CAE/CAM)软件研发
07-13 3594
网络通信的优化汇总 济南友泉软件有限公司 目录 一、 现有代码分析 1.1. Reactor模型 1.1.1. Reactor模型的优点 1.1.2. Reactor模型的优点. 1.2. 有限状态机模型 1.3. Async模块 1.2.1. Async工作原理 1.2.2. Async主要组件 1.4. RDMA 1.3.1. RDMA三种不同的硬件实现 1.3.2....
RDMA 、RoCE 、IB 、TCP、Ethernet
热门推荐
喝醉酒的小白
07-11 1万+
它通过使用专门的适配器和硬件来绕过操作系统和协议栈的限制，实现了直接从一个主机内存到另一个主机内存的数据传输。RoCE 将 RDMA 扩展到以太网上，使得具备 RoCE 功能的设备可以在以太网上实现低延迟和高带宽的数据传输。RDMA 是一种在 IB 和 RoCE 等技术中使用的数据传输模型，允许主机直接访问远程主机的内存。综上所述，RDMA、RoCE、IB、TCP 和 Ethernet 之间存在着密切的关系，涉及到不同层次的网络技术和协议，以满足高性能计算和数据中心网络的需求。
【RDMA】RDMA网卡通讯
eternal963的博客
03-03 1895
记录小白RDMA网卡通讯基本操作
【RDMA】RoCE Debug Flow for Linux（Linux下调试RoCE的流程）
bandaoyu的note
04-12 1554
原文：https://community.mellanox.com/s/article/RoCE-Debug-Flow-for-Linux *For the RoCE recommended configuration and verification, please clickhere. This post provides guidelines for how to debug the RoCE network and how to tune RoCE performanc...
KVM+GFS分布式存储系统构建KVM高可用
最新发布
weixin_71499831的博客
08-01 1100
这里直接使用CentOS官方提供的qcow2格式的系统镜像（CentOS-7-x86_64-GenericCloud-2009.qcow2），这个镜像可以直接部署到kvm或openstack的平台中。该工具提供了virt的高级命令，其中有一个virt-customize命令，可以为系统镜像设置密码。测试环境用的 VMware的环境，没有隔离设备，必须要关闭，否则无法实现高可用。当把虚拟机迁移到了另一台主机，会出现约束，要想将虚拟机迁移回来，需要先清除约束。
RDMA传输类型详解：连接与非连接模式的InfiniBand与RoCE
本文档主要探讨了RDMA（Remote Direct Memory Access）的传输类型，特别是在RoCE（RDMA over Converged Ethernet）和iWARP（Internet Wide Area RDMA Protocol）背景下。RDMA技术是一种高性能的网络通信技术，它允许...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值