ROCm build rccl

最新推荐文章于 2024-06-14 17:20:17 发布
最新推荐文章于 2024-06-14 17:20:17 发布
阅读量1k 收藏
点赞数
文章标签： linux hpc
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/suyuexinghen/article/details/109314642
版权
本文详细介绍了如何在ROCm3.3和ROCm3.5环境下编译rccl库。针对编译过程中遇到的libamdhip64.so路径错误问题，提出了解决方案，即修正ROCM安装路径下的cmake链接。同时，文章指出使用不低于3.5版本的cmake是必要的，并提供了手动安装cmake和libarchive的方法。在配置rccl时，若遇到找不到函数的问题，可以通过更新ldconfig缓存或修改CMakefile.txt中rccl为nccl来解决。
摘要由CSDN通过智能技术生成

ROCm build rccl

Compile rccl with ROCm3.3, cmake3.6

Wrong examples

module load compiler/cmake/3.15.6
module unload compiler/rocm/3.5
module load compiler/rocm/3.3
which hipcc
/public/software/compiler/rocm/rocm-3.3.0/bin/hipcc 
cd rccl-rocm-3.8.0/
sed -i "s#/opt/rocm#/public/software/compiler/rocm/rocm-3.3.0#" install.sh
./install.sh -i --hcc --prefix=$HOME/rccl
[100%] Linking CXX shared library librccl.so
ld.lld: error: cannot open /tmp/tmp.XbTYGPJsu7/kernel-gfx906.hsaco.isabin: No such file or directory
Generating AMD GCN kernel failed in ld.lld for target: gfx906
clang-10: error: linker command failed with exit code 2 (use -v to see invocation) make[2]: *** [CMakeFiles/rccl.dir/build.make:748: librccl.so.1.0] Error 2
make[1]: *** [CMakeFiles/Makefile2:76: CMakeFiles/rccl.dir/all] Error 2
make: *** [Makefile:152: all] Error 2 
cd rccl-rocm-3.8.0/ 
sed -i "s#/opt/rocm#/public/software/compiler/rocm/rocm-3.3.0#" install.sh
./install.sh -i --prefix=$HOME/rccl
clang-10: warning: argument unused during compilatio
最低0.47元/天 解锁文章
suyuexinghen
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
ROCm环境下安装tvm
CanaanLeeN的博客
06-15 1074
ROCm环境下安装tvm
nccl-rccl-parser：基于应用程序运行rccl-testsnccl-tests的工具
02-17
nccl-rccl-parser 此工具用于直接从应用程序中转出rccl-tests / nccl-test命令，以在运行分布式应用程序时使用RCCL / NCCL模块时识别任何潜在的扩展瓶颈。 首先，请克隆以下存储库：git clone --recursive 要运行测试，我们使用以下存储库： 在ROCm上： : 在CUDA上： : 先决条件： 已安装RCCL / NCCL。 已安装rccl-tests或nccl-tests。 如何使用该工具： 运行应用程序并收集RCCL / NCCL日志：** 首先，请确保您正在运行应用程序的分布式设置的实验。 确保使用以下两个环境变量将应用程序运行至少1次迭代，并将其运行到名为nccl_debug_log.txt的日志文件中 NCCL_DEBUG=INFO NCCL_DEBUG_SUBSYS=INIT,COLL <applic
ROCm:ROCm-HPC和超大规模GPU计算的开源平台
04-28
AMD ROCm:trade_mark:v4.1.1修补程序发行说明 在Ubuntu 18/20 HWE上安装rocm-libs4.1.1（RCCL）的已知问题 rocm-libs4.1.1软件包无法在Ubuntu 18/20 HWE上安装。 请注意，仅当系统上安装了早期版本的ROCm时，才会发生此问题。 用户不会在全新和完整安装rocm-libs4.1.1程序包中观察到此问题。 注意：rocm-libs4.1.1软件包已在CentOS / RHEL上成功安装。 这主要是由于v4.1.1 RCCL库安装存在已知问题引起的。 用户可以从rocm-libs元软件包中成功安装其他v4.1.1库。 例如， sudo apt-get install rocblas4.1.1 sudo apt-get install hipblas4.1.1 sudo apt-get install hipfft4.1.
ROCM指定gpu训练
qq_21521561的博客
05-01 605
ROCR_VISIBLE_DEVICES It is possible to rearrange or isolate the collection of ROCm GPU/GCD devices that are available on a ROCm platform. This can be achieved at the start of an application by way of ...
执行yum 报libpcre.so.1: cannot open shared object file: No such file or dire
最新发布
weixin_44876207的博客
06-14 365
执行yum 报libpcre.so.1: cannot open shared object file: No such file or dire报错解释：这个错误表明系统在尝试使用yum进行软件包管理时找不到libpcre.so.1这个共享库文件。libpcre.so.1是Perl兼容正则表达式库（PCRE）的动态链接版本，通常由pcre包提供。解决方法：安装缺失的库：执行以下命令来安装pcre包，这个包通常包含libpcre.so.1文件。
AMD 显卡编译 pytorch 指南 ROCM + pytorch
znsoft的专栏
10-18 1万+
ROCM + pytorch 快速安装方法 需要在干净机器上安装 原始参考资料 https://github.com/aieater/rocm_pytorch_informations ，有修改 在ubuntu 18.04 及ubuntu 20.04 测试通过 以下为安装pytorch 1.6 + rocm 3.5.1 (需要版本匹配） 1. 更新系统，安装必要的库 sudo apt update sudo apt -y dist-upgrade ...
AMD GPU驱动,ROCM,Pytorch安装教程(A卡6700xt)
qq_41613360的博客
04-08 3871
amd显卡用于机器学习，rocm安装教程。
AMD yes! 平民炬丹师的卡皇Radeon VII，老年博士生的丹房修建记录：Rocm 3.1+ pytorch 1.4+tensorflow 2+tensorflow 1.15.2 折腾记
znsoft的专栏
03-13 781
AMD GPU 数据训练 平台全折腾记
客户端报错LIBPCRE.SO.1找不到
PsgQ的博客
07-20 2884
文章目录报错分析解决办法 报错分析 今天在linux系统运行二进制可执行文件，发现爆如下错误： error while loading shared libraries: libpcre.so.1: cannot open shared object file: No such file or directory 说明缺少pcre库依赖，但是网上搜了很多教程，都无法解决。最后最近结合已搜的内容，想到了一个解决办法。 解决办法 首先安装最新的libpcre sudo apt-get install libp
Linux Ubuntu14.4 JRE7 amd64 lib so包
10-29
Linux Ubuntu14.4 JRE7 amd64 lib so包 在Linux 上安装JAVA环境老是因为缺包而出问题。 比如：java.lang.UnsatisfiedLinkError: no nio in java.library.path 就是因为缺包引起的。 直接把包覆盖到/java/jre/lib/amd64 下就可以正常运行了。
undefined reference to涉及的链接问题
热门推荐
lyuan13141234的专栏
06-12 3万+
<br />在linux下，编译链接的时候，经常会遇到这样一个问题，undefined reference to.....，引起这个问题的原因在于在链接的时候缺少选项。下面举几个例子，并给出解决办法。<br />1、undefined reference to `dlerror'<br />     undefined reference to `dlopen'<br />     undefined reference to `dlerror'<br />    解决办法：在makefile的LDFLAG
xcode/clang: clang: warning: argument unused during compilation: '-fcheck-new'
fishmai的专栏
10-28 3072
This warning can be silenced by adding the flag -Qunused-arguments It's a warning because clang does not support the -fcheck-new argument
APP使用自己的静态库,但在打包时出现的问题解决
tooles的博客
08-26 2286
打开选项如下图 那么问题来了，如果一个工程里面有静态库的引用，那么所有的静态库也需要打开Bitcode后重新编译。 这一切都没有问题，但是在“Archive”的时候就会报错。 这时，就需要给静态库的工程增加一个选项“-fembed-bitcode”。之后就可以正常Archive了。 报错内容 ld: bitcode bundle could not be gene
ubuntu 23.04从源码编译安装rocm运行tensorflow-rocm
fjh1997的博客
11-16 1786
官方的rocm二进制包最高只支持ubuntu22.04，不支持ubuntu 23.04，只能自己从源码编译虽然有网友告诉我可以用docker运行rocm。但是我已经研究了好几天，沉没成本太多，无奈只能继续硬着头皮研究，终于搞定了。记录下结果，可能有遗漏，顺序也可能不对，仅供参考。如果CMAKE有错误可以试试添加或者删除,毕竟为了避免冲突，rocm的库独立于系统主库了。首先，要明确一点，rocm安装的位置在/opt/rocm/目录下，而rocm-llvm工具链安装目录为这个可以通过解包官方的deb包来知道。
ubuntu20.04 安装rocm及tensorflow-rocm记录（已放弃）
qq571028495的博客
11-15 6057
580安装rocm，最终失败
Do you wish to build TensorFlow with ROCm support?
05-18
However, if you are asking whether it is possible to build TensorFlow with ROCm support, the answer is yes. TensorFlow can be built with ROCm support, which allows it to run on AMD GPUs. This can be ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值