前言:最近在用ms跑大模型,需要做好多步骤,遇到报错跟大家一起分析一下吧
刚开始转换权重就遇到了下述报错:
ImportError: /root/anaconda3/envs/MS/lib/python3.9/site-packages/torch/lib/../../torch.libs/libgomp-6e1a1d1b.so.1.0.0: cannot allocate memory in static TLS block
用chatgpt来解决报错不是最佳方案
解决方法:
#找到这个文件位置
find / -name libgomp-6e1a1d1b.so.1.0.0
#将文件路径添加到LD_PRELOAD环境变量中(具体路径根据上一步命令的回显决定哈)
export LD_PRELOAD=$LD_PRELOAD:/root/anaconda3/envs/MS/lib/python3.9/site-packages/torch.libs/libgomp-6e1a1d1b.so.1.0.0
#结束,并重新运行脚本,这个报错就没喽
通过按照以上步骤操作,我成功地解决了这个报错。希望这个解决方法能对你有所用!