解决使用docker加载模型报错/opt/hpcx/ompi/lib/libmpi.so.40: undefined symbol: opal_hwloc201_hwloc_get_type_dept

最新推荐文章于 2024-07-25 21:38:09 发布
最新推荐文章于 2024-07-25 21:38:09 发布
阅读量1k 收藏 4
点赞数 3
文章标签： docker nlp python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43278082/article/details/134198903
版权

问题描述

最近在使用AIMAX的集群资源部署大语言模型，AIMAX是通过加载镜像进入操作系统的，在使用docker镜像运行程序时报了如下错误：

/opt/hpcx/ompi/lib/libmpi.so.40: undefined symbol: opal_hwloc201_hwloc_get_type_depth

个人推测是c++的什么库缺少，导致有未定义的符号出现

解决方法

搜索百度以及Issue，个人解决这个报错的方法如下：
1.docker迁移遇到torch不能使用, 尝试但无果
2.OSError: /usr/local/mpi/lib/libmpi.so.40: undefined symbol: opal_hwloc201_hwloc_get_type_depth
有一个回答

apt purge hwloc-nox libhwloc-dev libhwloc-plugins libhwloc5

但是运行没办法安装最后一个libhwloc5
删掉最后一个库

apt purge hwloc-nox libhwloc-dev libhwloc-plugins

成功运行并解决问题！

陈小波
关注
  • 3
    点赞
  • 踩
  • 4
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
Win10 WSL运行docker报错：Cannot connect to the Docker daemon at unix:///var/run/docker.sock.
01-20
在Windows 10中使用Windows Subsystem for Linux (WSL) 运行Docker时，可能会遇到“Cannot connect to the Docker daemon at unix:///var/run/docker.sock.”的错误。这个错误通常意味着Docker守护进程（Docker ...
Linux-Nginx网站服务_在linux系统中执行killall -s quit nginx命令的作用分别是什么
2401_83621095的博客
04-26 697
user = php #运行用户。group = php #运行组。
解决mpi4py导入报错ImportError: libmpi.so.40: cannot open shared object file: No such file or directory
热门推荐
strawberry47的博客
08-09 1万+
网上找了好久的方法，试了很多都不行。
docker迁移遇到torch不能使用
liuliqun520的博客
06-22 3076
报错OSError: /opt/hpcx/ompi/lib/libmpi.so.40: undefined symbol: opal_hwloc201_hwloc_get_type_depth这个torch编译得环境存在问题解决方案sudo apt-get install libopenblas-base libopenmpi-dev原链接Unable to import pytorch - Jetson & Embedded Systems / Jetson Nano - NVIDIA Developer
symbol lookup error:XXX.so: undefined symbol: 解决办法----以 libpcap.so 的 pcap_dump_open_append 函数为例
Jason_Math的博客
03-23 2106
symbol lookup error:XXX.so: undefined symbol: 解决办法----以 libpcap.so 的 pcap_dump_open_append 函数为例；修改动态库链接路径的一个方法。
解决报错libiomp5.so: undefined symbol: ompt_start_tool
hwruirui的博客
11-04 1014
如题，报错python3: symbol lookup error: /home/anaconda3/myEnv/lib/python3.7/site-packages/numpy/../../../libiomp5.so: undefined symbol: ompt_start_tool
解决docker CMD/ENTRYPOINT执行sh脚本报: not found/run.sh:
01-20
Dockerfile配置没有问题，为什么执行ENTRYPOINT...最近通过Dockerfile编写镜像，CMD中调用的是sh脚本（start.sh）进行启动容器，通过docker run启动时，启动不成功，进行docker logs 容器ID，发现报错为：未预期的符
ubuntu vps安装docker报错：Cannot connect to the Docker daemon at unix:///var/run/docker.sock.问题解决
09-30
在Ubuntu VPS上安装Docker时，可能会遇到一个常见的错误：“Cannot connect to the Docker daemon at unix:///var/run/docker.sock.” 这个问题通常是由于Docker守护进程未运行或者是由于Linux内核版本过低导致的。...
Error response from daemon: Get https://registry-1.docker.io/v2/: dial tcp: lookup registry-1.docker
01-20
Error response from daemon: Get https://registry-1.docker.io/v2/: dial tcp: lookup registry-1.docker 一通百度，发现原来是dns服务器的错误，把服务器改成8.8.8.8或者114.114.114.114即可 具体做法: vim /etc/...
libstdc++.so.6: 无法打开共享对象文件: 没有那个文件或目录
05-11
### libstdc++.so.6: 无法打开共享对象文件: 没有那个文件或目录 #### 问题概述 用户在CentOS 7.6环境中遇到了“libstdc++.so.6: 无法打开共享对象文件: 没有那个文件或目录”的错误提示。该问题通常出现在尝试...
关于libmpi.so 的若干问题‘opal_uses_threads’和‘mca_base_var_enum_create_flag’记录，没找到解决办法
weixin_50508111的博客
11-07 856
第一个在编译一个点线SLAM源码的时候遇到的 报错如下：/usr/lib/x86_64-linux-gnu/openmpi/lib/libmpi.so：对‘opal_uses_threads’未定义的引用 /usr/lib/x86_64-linux-gnu/openmpi/lib/libmpi.so：对‘mca_base_var_enum_create_flag’未定义的引用 collect2: error: ld returned 1 exit status CMakeFiles/Planar_SLAM.
[11]缺少动态连接库.so--cannot open shared object file: No such file or directory
qqwangfan的专栏
09-04 950
http://www.cnblogs.com/smartvessel/archive/2011/01/21/1940868.html [11]缺少动态连接库.so--cannot open shared object file: No such file or directory 总结下来主要有3种方法： 1. 用ln将需要的so文件链接到/usr/lib或者/lib这两个默认的目录下边 l...
CUDA7.0 下安装基于CUDA6.5的AMGX LINUX
jinwinss的博客
02-16 864
AMGX 下载网址点击打开链接 1.目前只更新到基于cuda6.5.   lib目录下的libamgxsh.so需要用到需要用到 libcudart.so.6.5 libcucublas.so.6.5 libcucuparse.so.6.5 而如果电脑上装的cuda版本为7.0的话是没有这些动态库的 由于AMGX没有开源，不能对其进行修改， 一开始考虑重新安装cuda6.
mpich示例代码运行报错
QuantumHorizons的博客
06-26 2799
在Ubuntu20系统中安装了mpich-3.4.2后，运行如下的示例代码，结果报错 #include <mpi.h> #include <iostream> int main(int argc, char* argv[]) { MPI_Init(&argc, &argv); int rank; MPI_Comm_rank(MPI_COMM_WORLD, &rank); if (rank == 0) { int value =
解决docker迁移后新环境加载模型报错/opt/hpcx/ucx/lib/libucs.so.0: undefined symbol: ucm_set_global_opts
weixin_51748327的博客
02-05 580
成功运行并解决问题！
undefined symbol问题的查找、定位与解决方法
lovely_yoshino的博客
12-14 1万+
而这块可以看到fpdf_parse_encrypt是依赖于下边的fx_crypt文件的，再看静态库，fpdf_parse_encrypt被编译成fpdfapi.a，而fx_crypt被编译进pdrm.a静态库，所以应该是fpdfapi.a要依赖于pdrm.a静态库的。ldd命令，可以查看对应的可执行文件或库文件依赖哪些库，但可执行文件或库文件要求与操作系统的编译器类型相同，即电脑是X86的GCC编译器，那么无法通过ldd命令查看ARM交叉编译器编译出来的可执行文件或库文件。
docker 篇
最新发布
gdutlhh的专栏
07-25 632
简单描述下，有时候真的要熟练，否者上了生产真的不知所措。背景：有个项目上线了，依赖的项目没有上线，因此需要紧急发布，发现：打包环境有问题，第一、架构不一致，第二、环境隔离导出镜像包慢，第三、本地打包dockerfile不一致导致加载配置有问题。
ImportError: ./lib/nms/cpu_nms.cpython-36m-x86_64-linux-gnu.so: undefined symbol: PyFPE_jbuf
09-07
根据引用和引用中的信息，ImportError: ./lib/nms/cpu_nms.cpython-36m-x86_64-linux-gnu.so: undefined symbol: PyFPE_jbuf是由于缺少符号PyFPE_jbuf引起的。解决办法是在导入cpu_nms之前先导入torch，即先执行import torch，然后再执行import cpu_nms。 根据引用的信息，Python3.8在导入sqlite3时报错ImportError: No module named '_sqlite3'。这可能是由于缺少_sqlite3模块引起的。解决办法是安装Python的sqlite3模块。您可以尝试执行以下命令来安装sqlite3模块：pip install pysqlite3。 关于您提到的GPU架构不匹配的问题，根据引用的信息，您的工作站的GPU是GeForce RTX 2080 Ti，而Docker内的GPU是Tesla V100-SXM2-32GB。由于两者的架构不同（Turing和Volta），在安装MMCV时需要使用适当的架构参数。您可以尝试使用TORCH_CUDA_ARCH_LIST=7.0 pip install mmcv-full命令来安装适用于您的GPU架构的MMCV。 综上所述，对于ImportError: ./lib/nms/cpu_nms.cpython-36m-x86_64-linux-gnu.so: undefined symbol: PyFPE_jbuf的错误，您可以先导入torch再导入cpu_nms解决。对于ImportError: No module named '_sqlite3'的错误，您可以尝试安装pysqlite3模块来解决。对于GPU架构不匹配的问题，您可以使用适当的架构参数来安装MMCV。<span class="em">1</span><span class="em">2</span><span class="em">3</span><span class="em">4</span>
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值