rdma-read/write例程

最新推荐文章于 2024-12-04 17:07:56 发布
最新推荐文章于 2024-12-04 17:07:56 发布
阅读量713 收藏 4
点赞数 1
分类专栏： RDMA 文章标签： 网络 linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38158479/article/details/127690112
版权

client.c

#include <stdio.h>
#include <netdb.h>
#include <stdlib.h>
#include <string.h><
了解本专栏 订阅专栏 解锁全文 超级会员免费看
rdma-ud例程
qq_38158479的博客
11-08 673
rdma-ud例程
RDMA send/recv 和 read/write操作
Sylvia_Wu51的博客
07-28 3632
RDMA one-side 和 two-side原语 在RDMA传输中，SEND/RECEIVE是双边操作，即需要通信双方的参与，并且RECEIVE要先于SEND执行，这样对方才能发送数据，当然如果对方不需要发送数据，可以不执行RECEIVE操作，因此该过程和传统通信相似，区别在于RDMA的零拷贝网络技术和内核旁路，延迟低，多用于传输短的控制消息。WRITE/READ是单边操作，顾名思义，读/写操作是一方在执行，在实际的通信过程中，WRITE/READ操作是由active即客户端来执行的，而passive即
RDMA编程实例源码（rdma_cm API）
05-12
RDMA编程实例源码（rdma_cm API）
RDMA技术浅析（二）
袁赟的博客
04-08 2743
本章主要探讨RDMA软件相关的部分。 一、名词解释 首先解释一下几个名词： rdma-core 指开源RDMA用户态软件协议栈，包含用户态框架、各厂商用户态驱动、API帮助手册以及开发自测试工具等。 rdma-core在github上维护，我们的用户态Verbs API实际上就是它实现的。https://github.com/linux-rdma/rdma-core 代码目录结构如下： 其中比较重要的几个目录是： libibverbs 以ibv为前缀，这里的ib并不代表infiniband
【RDMA】RDMA SEND/WRITE编程实例（IBV Verbs ）
bandaoyu的note
04-22 3621
目录 基于Verbs的RDMA RC通信编程示例概要 Main print_config resources_init resources_create sock_connect connect_qp modify_qp_to_init post_receive sock_sync_data modify_qp_to_rtr modify_qp_to_rts post_send poll_completion resources_destroy 代码（Send, Rec.
RDMA通信3：基本操作类型Send/Recv,Write,Read机制和通信过程
爱串门的小马驹博客
07-19 3310
RDMA支持多种通信方式，常见的包括：Send(发送)和Receive(接收)、RDMA Write、RDMA Read。哈哈哈，今天我们就来了解一下这些通信原语的通信过程。
【RDMA】RDMA read和write编程实例（IB verbs）
bandaoyu的note
12-04 1796
为简洁起见（并说明它们几乎相同），此示例的代码合并了上一组帖子中的许多客户端和服务器代码（common.c中），客户端 (rdma-client) 和服务器 (rdma-server) 继续运行不同的 RDMA 连接管理器循环处理事件（RDMA connection manager event loops），但它们相同的verbs 代码部分——轮询 CQ、发送消息、发布 RDMA 操作等共用一份代码。等待 MSG_DONE 是必要的，否则我们可能会在对等方（peer）的 RDMA 操作完成之前关闭连接。
the-geek-in-the-corner.rar
09-24
02_read-write 03_file-transfer linux rdma例程，含makefile ，可直接编译运行 目前，有三种支持 RDMA 的技术：IB、以太网 RoCE、以太网 iWARP。这三种 技术使用本文中定义的同一 API，但它们有着不同的物理层和...
远程调用-Sun RPC
weixin_50866517的博客
10-04 3076
构建一个庞大的单一程序，完成全部工作。把整个应用程序散布到彼此通信的多个进程中。假设所有进程运行在同一台主机上。假设某些进程会运行在其他主机上。不同部分之间需要网络通信的应用程序大多数是使用显式网络编程方式编写的，也就是如UNPvl中讲述的那样直接调用套接字API或 XTI API。使用套接字API时，客户调用socket、connect、read和write, 服务器则调用socket、bind、listen、 accept、read和write。
RDMA read/write with ib verbs
684的博客
02-27 921
RDMA因为其kernel-bypass，zero-copy，cpu offload三种特性，能够提供低延迟、高吞吐的数据传输性能。 使用RDMA进行数据传输时，read/write在client/server端的具体操作可以概括为以下步骤： 1. 初始化连接和注册内存区(Memory Region); 2. 建立连接; 3. ...
RDMA编程实例
weixin_33935505的博客
03-10 482
1,RDMA verbs Multicast Code for Multicast Using RDMA_CM(Remote directory memory access_connect management) and IBV Verbs; 　　Multicast Code Example; /* *BUILD Command *gcc -g -Wall -D_GN...
RDMA编程1 建立侦听
winux的专栏
06-28 1万+
RDMA编程 server端开发 Server端如何进行侦听和建立连接
RDMA
Likes的博客
10-19 2885
来源： https://zcopy.wordpress.com/ 说明： 本文不是对原文的逐字逐句翻译，而是摘取核心部分以介绍RDMA Send操作(后面凡是提到RDMA send, 都对应于IBA里的send操作)。文中给出的例子非常浅显易懂，很值得一读。 1. What is RDMA | 什么是RDMA RDMA is Remote Direct Memory Access whic...
关于IBV_WR_RDMA_WRITE_WITH_IMM的理解
qq_38158479的博客
12-13 1861
对于IBV_WC_RECV_RDMA_WITH_IMM的描述是这样的，也就是说并不需要sge,所以下发的sge，可以是NULL，个数可以是0。(1)需要下发post_recv,但是下发是post_recv当中的sge的地址可以是空，sge个数可以是0。伪代码，实际的rkey和addr已经通过socket交换。并且poll_cq时，有返回，在这篇文章当中对于poll_cq时，主要区别点有两个，这个是对于接收端而言。(2)可以带即时数据，
【IB协议--RDMA READ操作】
li_kin的博客
11-19 1148
IB协议 READ操作
RDMA 编程备忘录
abc593043305的博客
03-29 676
1、RDMA WRITE WITH IMM操作需要消耗receive request，因此在接收方处理完之后需要ibv_post_recv()避免RNR错误。 （测试所得，不准确之处请指教）
【RDMA】技术详解（一）：RDMA概述
热门推荐
bandaoyu的note
01-20 6万+
原文：https://blog.csdn.net/qq_21125183/article/details/86522475 1. DMA和RDMA概念 1.1 DMA DMA(直接内存访问)是一种能力，允许在计算机主板上的设备直接把数据发送到内存中去，数据搬运不需要CPU的参与。 传统内存访问需要通过CPU进行数据copy来移动数据，通过CPU将内存中的Buffer1移动到Buffer2中。DMA模式：可以同DMA Engine之间通过硬件将数据从Buffer1移动到Buffer2,而不需要操作系统
CMake Error at libibumad/man/cmake_install.cmake:110 (file): file INSTALL cannot find "/home/xwm/rdma-core-virtio-rdma/buildlib/pandoc-prebuilt/41bbb0bed7a781be59e8 c0dcd8b7278af2ce6882": No such file or directory. Call Stack (most recent call first): cmake_install.cmake:77 (include)
最新发布
03-19
<think>好的，我现在需要解决用户遇到的CMake错误。用户提供的错误信息是关于文件安装时找不到某个路径下的文件，具体路径是`/home/xwm/rdma-core-virtio-rdma/buildlib/pandoc-prebuilt/41bbb0bed7a781be59e8c0dcd8b7278af2ce6882`。首先，我需要分析可能的原因和解决方案。 首先，错误发生在`libibumad/man/cmake_install.cmake`的第110行，提示`file INSTALL`无法找到指定的文件。这个路径看起来像是构建过程中生成的临时文件或预构建的依赖项。路径中的`pandoc-prebuilt`可能意味着项目在构建时需要Pandoc来生成文档，但预构建的Pandoc二进制文件没有正确下载或存放。 接下来，我需要考虑可能的解决方法。首先，检查项目是否需要Pandoc，以及是否正确安装。如果用户没有安装Pandoc，可能需要安装它。另外，路径中的哈希值`41bbb0bed7a781be59e8c0dcd8b7278af2ce6882`可能是一个特定版本的Pandoc的标识符，可能项目期望从某个地方获取这个文件，但下载失败或路径配置错误。 然后，考虑构建目录的结构。用户可能在构建时使用了某种预构建的依赖管理，比如通过CMake的ExternalProject或者FetchContent模块来获取Pandoc。如果这个文件没有被正确下载或生成，就会导致安装时找不到文件。 可能的解决步骤包括： 1. 清理构建目录并重新构建，有时候残留文件可能导致问题。 2. 确保Pandoc已经正确安装在系统中，并且CMake能够找到它。可能需要设置`-DPANDOC_EXECUTABLE`指向正确的路径。 3. 检查项目的CMake配置，看是否有选项可以禁用文档生成，从而避免对Pandoc的依赖。 4. 手动下载所需的Pandoc预构建文件，并放置到指定的路径中。 5. 检查网络连接，确保在构建过程中能够下载所需的依赖项。 另外，用户提到项目是`rdma-core-virtio-rdma`，可能是一个特定分支或修改版的rdma-core。可能需要查看该项目的文档或问题跟踪系统，看看是否有其他用户遇到类似的问题，或者是否有特定的构建步骤需要注意。 还需要考虑CMake脚本中的`cmake_install.cmake`文件，该文件是CMake生成的安装脚本。错误出现在第110行的`file INSTALL`命令，这可能是在尝试安装某个生成的文件或资源时失败。需要确认该文件是否应该在构建过程中生成，或者是否被错误地引用。 如果用户没有修改过CMake脚本，可能是项目的CMake配置存在问题，或者在特定环境下（如不同的操作系统或架构）路径处理有误。例如，路径中的`buildlib`目录是否是项目期望的构建目录，或者是否有环境变量影响路径的生成。 总结可能的解决方案步骤： 1. 清理构建目录（删除build目录）并重新运行CMake和构建命令。 2. 安装Pandoc并确保CMake能找到它。 3. 禁用文档生成（如果有相关CMake选项）。 4. 手动处理缺失的预构建文件。 5. 检查项目的issue或论坛，寻找类似问题的解决方案。 在回答用户时，需要分步骤说明这些可能的解决方法，并建议用户按照顺序尝试，同时解释每个步骤的目的和可能的影响，帮助用户理解问题根源并有效解决。</think>--- ### **问题分析** 该CMake错误表明在安装阶段无法找到预构建的`pandoc`工具文件。此问题通常由以下原因导致： ``` CMake Error at libibumad/man/cmake_install.cmake:110 (file): file INSTALL cannot find "/home/xwm/rdma-core-virtio-rdma/buildlib/pandoc-prebuilt/41bbb0bed7a781be59e8c0dcd8b7278af2ce6882" ``` --- ### **逐步解决方案** #### **1. 确认Pandoc依赖** - **问题根源** `rdma-core`项目需要`pandoc`工具生成文档（如man pages）。 - 错误路径中的`pandoc-prebuilt`表明项目尝试使用预编译的`pandoc`，但文件下载失败或路径配置错误。 - **验证步骤** 检查CMake日志，查找与`pandoc`相关的下载或配置信息： ```bash grep -i "pandoc" CMakeCache.txt ``` --- #### **2. 安装系统级Pandoc** - **推荐方案** 直接安装系统版本的`pandoc`，跳过预编译步骤： ```bash # Ubuntu/Debian sudo apt-get install pandoc # CentOS/RHEL sudo yum install pandoc ``` - **重新配置CMake** 添加选项禁用预编译包，强制使用系统工具： ```bash cmake .. -DFORCE_SYSTEM_PANDOC=ON ``` --- #### **3. 清理并重建** - **清除旧构建** 删除残留的构建目录和缓存： ```bash rm -rf buildlib/ CMakeCache.txt ``` - **完整重建** ```bash mkdir build && cd build cmake .. -DFORCE_SYSTEM_PANDOC=ON make ``` --- #### **4. 手动补全预编译文件（备选）** 若必须使用预编译版本： 1. **下载文件** 通过浏览器或命令行下载缺失的`41bbb0...`文件（需确认下载URL）。 ```bash wget -O buildlib/pandoc-prebuilt/41bbb0bed7a781be59e8c0dcd8b7278af2ce6882 <URL> ``` 2. **设置文件权限** ```bash chmod +x buildlib/pandoc-prebuilt/41bbb0bed7a781be59e8c0dcd8b7278af2ce6882 ``` --- #### **5. 禁用文档生成** 如果无需文档，可关闭相关功能： ```bash cmake .. -DNO_DOCS=ON ``` --- ### **关键配置选项** | 选项 | 作用 | |--------------------------|-------------------------------| | `-DFORCE_SYSTEM_PANDOC=ON` | 强制使用系统安装的Pandoc | | `-DNO_DOCS=ON` | 禁用文档生成功能 | | `-DDOWNLOAD_PANDOC=OFF` | 关闭自动下载预编译Pandoc | --- ### **原理说明** 1. **预编译机制** `rdma-core`默认尝试下载特定版本的`pandoc`（哈希校验确保安全性），若网络受阻或权限不足会导致文件缺失。 2. **路径定位** CMake通过`buildlib/pandoc-prebuilt/`目录查找预编译工具，路径硬编码在项目的CMake脚本中。 3. **原子性操作** 文件下载或生成失败会中断安装流程，触发`file INSTALL`错误。 --- ### **扩展建议** - **代理配置** 若处于受限网络环境，为`wget`或`git`配置代理： ```bash export http_proxy=http://proxy.example.com:8080 export https_proxy=http://proxy.example.com:8080 ``` - **依赖隔离** 使用`conda`或`virtualenv`管理Pandoc环境： ```bash conda create -n rdma-build pandoc conda activate rdma-build ``` --- ### **总结** 优先通过安装系统级Pandoc并配置`-DFORCE_SYSTEM_PANDOC=ON`解决问题。若需深入调试，检查CMake日志中的下载失败详情，或手动补全缺失文件。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

酸菜。

你的鼓励是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值