解决mkl FATAL ERROR : Cannot load libmkl_avx2.so or libmkl_def.so

问题描述

使用faiss库是deepnote下按照conda mkl→conda faiss-cpu -c pytorch步骤完成安装的。结果运行过程突然报错Intel MKL FATAL ERROR: Cannot load libmkl_avx2.so or libmkl_def.so.问题

解决方案

export LD_PRELOAD=/home/jovyan/miniconda3/lib/libmkl_rt.so

问题原因：库存在，但mkl与其他库之间的依赖关系出现混乱。一种方法是用nomkl替换mkl库，减少库之间的依赖错误；另一种是设置环境变量LD_PRELOAD[用于动态库的加载，动态库加载的优先级最高].由于我是miniconda中的python内部报错，所以指定miniconda/lib

1. 尝试安装nomkl不能解决
2. 尝试设置LD_PRELOAD环境变量，因为我在deepnote里安装的是miniconda不能解决

export LD_PRELOAD=/home/ /miniconda3/lib/libmkl_core.so:/home/ /miniconda3/lib/libmkl_sequential.so

结果还是出问题，最后参照参考1中的libmkl_rt.so解决

[参考]

1.快速解决Intel MKL FATAL ERROR: Cannot load libmkl_avx2.so or libmkl_def.so.问题
2. linux-anaconda中mkl库的一个坑