基于NVIDIA QM8700/8790交换机与HDR网卡的InfiniBand高性能网络解决方案

最新推荐文章于 2023-12-14 16:39:02 发布
VIP文章 最新推荐文章于 2023-12-14 16:39:02 发布
阅读量2.2k 收藏 9
点赞数
文章标签： 网络
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fiber_naddod/article/details/127675100
版权

水之积也不厚，则其负大舟也无力，如果将高性能计算、机器学习、大数据、云、web 3.0 、存储平台等应用看作“舟”，那InfiniBand网络无疑是承载这些大舟的水。随着数据的爆发式增长，这些应用对网络带宽、延时、效率的要求不断提升，面对这些挑战，NVIDIA也相继推出InfiniBand 100G EDR、200G HDR以及400G NDR的解决方案。

纳多德是NVIDIA网络产品的Elite Partner，在InfiniBand高性能网络建设与应用加速方面拥有深刻的业务理解和丰富的项目实施经验。纳多德基于QM8700、QM8790交换机、HDR网卡与AOC/DAC/光模块，构建InfiniBand高性能网络，提供更出色的数据吞吐和网络计算能力，满足越来越高的计算需求。

什么是InfiniBand？

InfiniBand (IB) 是一个计算机网络通信标准，在高性能计算（HPC）领域有广泛的应用，可以提供高吞吐带宽和超低的网络传输时延。IB可以用于计算机内部或外部的数据互联。通过直连或者交换机互联的方式，提供服务器与存储，存储设备之间的高性能网络。IB网络可以通过交换机网络实现横向扩展，适应各种规模的组网需求。

在这里插入图片描述

图一 InfiniBand速率演进

作为计算机集群互联技术，IB技术相比以太网/Fibre Channel 和已经淘汰的Omni-Path技术有明显的优势，是InfiniBand Trade Association（IBTA）主要推荐的网络通信技术。从2014年开始，大多数的

最低0.47元/天 解锁文章
追光者跑起来
关注
  • 0
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
详解Mellanox 200G HDR InfiniBand解决方案
Hardy
12-20 1万+
在数字信息的不断暴增的世界里，通过实时对分析数据挖掘其特征的能力已经成为一种竞争优势。一个先进的网络必须解决的问题就是快速和有效地传输不断增长的数据，同时必须实时地对数据进行分析。 网络协同技术已经彻底改变了这个行业，它清楚地表明，传统的以CPU为中心的数据中心架构已经过时了，在这种架构中，尽可能多的功能都需要被载到CPU上处理。过渡到以数据为中心的新体系结构要求网络高速且有效...
带管理口的mellanox交换机开启端口一分二特性
wjcaiyf的专栏
11-03 2572
HPC技术指令说明书 指令编号 LCKF_HPC_20200428 指令名称 HDR交换机（MQM8700）接口模式变更. 影响范围： HDR交换机+HDR 2x100Gb/s线缆+ HDR100 HCA卡的IB网络环境, 包含MQM8700-HS2F和MQM8700-HS2R两个型号的可管理IB交换机 故障现象： HDR交换机+HDR 2x100Gb/s线缆+ HDR...
Infiniband HDR 网卡、交换机使用向导
weixin_41687819的博客
04-16 3439
Infiniband HDR 200Gb 产品开箱使用向导，包括OFED驱动安装，端口状态查看，RDMA基础性能测试。
200G InfiniBand HDR线缆和光模块：为高速网络应用带来新的突破
poposu的博客
12-14 320
根据数据传输速率的不同可分为SDR（10G）、DDR（25G）、QDR（40G）、FDR（56G）、EDR（100G）、HDR（200G）和NDR（400G）等。是一种基于QSFP56 VCSEL的线缆，与DAC无源铜缆结构配置相同（200G HDR to 200G HDR和200G HDR to 2×HDR100），但更轻、更灵活，支持更高密度，并且比DAC的覆盖范围更长（一般在100m以内）。是4通道全双工无源铜缆的组件，采用50G PAM4调制方式，提供成本极低的HDR链路。根据结构可分为直接连接。
被收购前的最后荣光——200G Mellanox QM8700 Infiniband 交换机简评
aosudh的博客
02-27 1115
水之积也不厚，则其负大舟也无力，如果将高性能计算、机器学习、大数据、云、web 3.0 、存储平台等应用看作“舟”，那InfiniBand网络无疑是承载这些大舟的水。随着数据的爆发式增长，这些应用对网络带宽、延时、效率的要求不断提升，面对这些挑战，NVIDIA也相继推出InfiniBand 100G EDR、200G HDR以及400G NDR的解决方案。而与QM8700/8790正是其中属于HDR 200G的交换机。
InfiniBand（IB）网络解决方案
老网工的岁月独白
07-24 7694
全称是Remote Direct Memory Access，即远程直接内存访问，是一种用于高性能网络通信的技术。RDMA技术可以让计算机直接访问远程计算机的内存，而无需在本地和远程计算机之间进行数据复制。相比传统的网络通信方式，RDMA技术具有更低的延迟、更高的带宽和更低的CPU利用率等优点，可以显著提高网络通信的性能和效率。目前支持RDMA的网络协议主要有：InfiniBand（IB）、ROCE、iWARP。
PCIe/网卡相关设备参数：PCIe HHHL、FHHL、 OCP3.0 TSFF、SFF的作用
凌凌1301的博客
02-26 8898
相对于内部存储设备（如固态硬盘、机械硬盘等），外部存储设备更加灵活，可以随时连接或拆卸，方便数据的传输和备份。ROC芯片通常用于高端的SAS控制器卡中，具有更强的计算和处理能力，能够提供更高的性能和更复杂的RAID功能。总的来说，双口QSFP112和单端口OSFP都是高速光纤传输模块，用于连接网络设备以实现高速数据传输，但它们的传输速率和端口数不同，因此在选择时需要根据实际需求进行评估。总的来说，InfiniBand网络是一种高性能、可扩展、灵活和安全的网络技术，适用于大规模的高性能计算和存储应用。
【infiniband】SDR、DDR、QDR、FDR、EDR、HDR、NDR
数字人生
09-12 6499
- SDR（Single Data Rate） - DDR（Double Data Rate） - QDR（Quad Data Rate） - FDR（Fourteen Data Rate） - EDR（Enhanced Data Rate）
以太网卡、IB网卡的详细介绍以及区别分析
fiber_naddod的博客
10-28 6745
以太网卡是一种网络适配器，是一种插入主板插槽的卡，支持以太网协议标准。每块网卡都有全球唯一的物理地址，称为MAC地址，在网络中可以依据网卡的MAC地址将数据准确地发送到目的计算机中。以太网卡的种类很多，分类方法也多种多样，可以按照带宽、网络接口类型、总线接口类型这三种方式进行划分。其中，光口的以太网卡一般叫做光纤以太网卡（光纤以太网适配器，简称光纤网卡），其遵循光纤以太网通信协议，通常使用光纤线缆与光纤以太网交换机连接，是目前应用最为广泛的网卡类型。目前光纤网卡主要可以从总线接口和带宽进行分类；
从零学习 InfiniBand-network架构（四） —— IB六层网络模型
sz_woshishazi的博客
10-18 3028
本章将介绍IBA的六层网络模型，其模型与经典网络模型OSI七层模型类似，并简单介绍了每层的责任与功能，并解释了IBA设备实现层次的原因，IBA六层网络模型中更详细的物理层和QoS内容将在后续两章介绍。
适合高速高密度应用的可插拔I/O接口解决方案
11-08
作为网络、存储和电信设备应用中的高速I/O连接，可插拔I/O接口的优势非常明显。它的特点是带有标准设备I/O接口，可插拔模块和线缆连接方式灵活，可以选择光纤或铜缆链路。它同时支持多种数据传输速率以及以太网、光纤通道和InfiniBand等多种协议。因此，集成商可利用其根据不同应用需求设计线缆结构。当前，数据通信设备对带宽需求的飞速增长，促使了可插拔I/O接口迅速更新换代，以期利用更小的封装实现更大的吞吐量。 　　目前，包括单端口以及单排堆叠式高密度多端口SFP屏蔽笼的小封装热插拔(SFP)产品线业已成熟，工业应用十分广泛。它们的主板上都包含了高速信号连接器和电磁干扰屏蔽笼。随着市场对功能和数
通信与网络中的FULCRUM推出具有高性能路由特性的10G以太网交换芯片
12-04
FM4000系列10G以太网交换芯片具有高性能路由的特性，可以使数据中心网络扩展到数以千计的节点。他们是完备的层2/3/4 IP交换/路由器，可以在所有端口上以最高传输线速率工作，总的吞吐率可达360 Mpackets/s。该芯片在具有最短反应时间，当配置为完备的层3/4路由器时为300ns，其性能超过了诸如InfiniBand和Fibre Channel构架的性能。　　该器件具有24端口密度，2Mbytes的存储器以及XAUI SerDes接口。当用于胖树（Clos）网络构架时，三层交换的网络可以扩展到3456个不闭塞的节点。他们同样具有达16K地址的IPv4和IPv6的路由，带有深监测的L
面向高速应用的高密度可插拔I/O接口解决方案
11-09
作为网络、存储和电信设备应用中的高速I/O连接，可插拔I/O接口的优势非常明显。它的特点是带有标准设备I/O接口，可插拔模块和线缆连接方式灵活，可以选择光纤或铜缆链路。它同时支持多种数据传输速率以及以太网、光纤通道和InfiniBand等多种协议。因此，集成商可利用其根据不同应用需求设计线缆结构。当前，数据通信设备对带宽需求的飞速增长，促使了可插拔I/O接口迅速更新换代，以期利用更小的封装实现更大的吞吐量。 　　目前，包括单端口以及单排堆叠式高密度多端口SFP屏蔽笼的小封装热插拔(SFP)产品线业已成熟，工业应用十分广泛。它们的主板上都包含了高速信号连接器和电磁干扰屏蔽笼。随着市场对功能和数
通信与网络中的Zarlink推出QSFP InfiniBand光学收发器模块
11-29
卓联半导体宣布推出首款QSFP高密度四通道前面板可插拔的InfiniBand光学收发器。 日前开始提供样品的卓联4x2.5 Gbps (IB SDR) QSFP模块将在QLogic 一款InfiniBand 主机通道适配器中展示。在单个集成模块中结合四通道超高容量以及独立光纤发送和接收通道，卓联公司的QSFP产品使InfiniBand设备制造商可通过边缘和板密度的提高节省60%以上的空间，同时将每收发通道的功耗降到250 mW。该QSFP模块还集成了全面的数字诊断监控功能。 　　InfiniBand QSFP收发器满足了市场对于一瓦功耗、可热插拔、数据速率可扩展的高密度可靠多平面网络和数据
集成本地InfiniBand的Engenio存储解决方案
11-28
Engenio存储解决方案家族的最新成员Engenio 6498控制器与Engenio 6498存储系统集成了本地InfiniBand和第六代Engenio XBB架构，高性能的光纤通道或者大容量SATA磁盘驱动器的连通性，以及强大的存储管理软件解决...
电子/工程高性能仿真方案
最新发布
04-15
本方案针对芯片设计、汽车工程...该方案是基于X86硬件平台、主流Linux系统平台、InfiniBand网络架构、Slurm任务调度系统、相关行业仿真软件构建。此方案适用于从事相关行业的IT/EDA运维工程师、技术总监等职业人士。
智算中心网络架构设计实践（2023）
Hardy
08-11 1871
比如对于端口数为 40 的交换机，两层胖树架构可容纳的 GPU 卡的数量是 800 卡，三层胖树架构可容纳的 GPU 卡的数量是 16000 卡。不同GPU编号的智算节点间，借助NCCL通信库中的Rail Local技术，可以充分利用主机内GPU间的NVSwitch的带宽，将多机间的跨卡号互通转换为跨机间的同GPU卡号的互通。网络可承载的 GPU 卡的规模和所采用交换机的端口密度、网络架构相关。网络的层次多，承载的 GPU 卡的规模会变大，但转发的跳数和时延也会变大，需要结合实际业务情况进行权衡。
InfiniBand 网络
David Dai -- Focus on Oracle
02-28 8214
<br /> <br />       当前光纤通道和以太网已经能够支持 10Gbps和更高的速率。因此，在计算机中的主机 I/O总线必须能够以同样的速率发送数据。然而，与所有的并行总线一样，PCI总线限制了网络速度的进一步提高。  事实上，基于网络架构的 PCI 总线带宽要达到双向 2 Gbps 都很困难。<br />       InfiniBand代表一种新兴的 I/O技术，它很有可能在高端服务器中取代PCI总线。作为一种介质，InfiniBand定义了各种铜电缆和光导纤维线缆，它为铜缆和光缆指定的最
NVIDIA LinkX 助力InfiniBand网络高速稳定与可靠传输
fiber_naddod的博客
07-27 607
InfiniBand（直译为“无限带宽”技术，缩写为IB）是一个用于高性能计算的计算机网络通信标准，是世界领先的超级计算机的互连首选。基于NVIDIAInfiniBand的端到端网络可实现极低的延迟，以及高数据吞吐量和传输速率。InfiniBand网络主要用于高性能计算（HPC）场景，通过高速的InfiniBand技术，将业务负载由单机运行转化为基于多机协作的高性能计算集群。采用了InfiniBand网络技术，使得高性能集群的性能得以进一步地释放和优化。...
基于debian linux 的机房高性能计算环境的构建
05-14
在基于Debian Linux的机房中，要构建高性能计算环境需要以下几个步骤： 1. 确保机房硬件设备满足高性能计算的要求，如计算节点数量、内存大小、硬盘容量、网络带宽等。 2. 安装并配置MPI（消息传递接口），这是构建高性能计算环境的基础。MPI是一种在并行计算中通信的标准，可用于在不同计算节点之间传递数据和命令。 3. 安装并配置高性能计算软件，如OpenMPI、OpenBLAS、Intel MKL等，这些软件能够优化计算节点的性能，提高计算速度。 4. 配置计算节点之间的网络通讯，一般使用InfiniBand或者Ethernet网络。InfiniBand网络性能更好，常用于超算中心，而Ethernet网络则更常用于普通的高性能计算机房。 5. 使用Job Scheduler排队管理并分配任务。Job Scheduler是一种任务调度软件，可以将计算任务分配给计算节点，并控制计算节点的使用，从而优化集群的性能。 6. 对集群做监控和管理，通过软件，如GANGLIA、Nagios、Zabbix等实时观察集群的状态，及时发现并解决问题。 在高性能计算环境的构建中，需要注意安全性和稳定性。要特别关注集群的备份和恢复机制，并做好定期维护与更新工作。同时，要确保计算节点之间的数据相互独立且不会相互干扰，以防止程序的错误和数据的损坏。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值