Anaconda Pytorch CUDA GPU 版本匹配问题整理 linux远程服务器

听小瑜儿

已于 2022-10-23 22:43:20 修改

阅读量1.3k

点赞数

文章标签： conda pytorch 深度学习

于 2022-10-19 20:37:02 首次发布

本文链接：https://blog.csdn.net/m0_61267964/article/details/127408986

版权

【遇到的问题】

大概意思就是说当前GPU的算力与当前版本的Pytorch依赖的CUDA算力不匹配（3090算力为8.6，而当前版本的pytorch依赖的CUDA算力仅支持3.7，5.0，6.0，6.1，7.0，7.5）

参考：低版本GPU可在相对高的CUDA版本下运行，例如：算力为8.0的GPU可在算力为8.6的CUAD版本下运行，而相反则不行。同理算力8.x的显卡不可以在支持最高算力7.x的CUDA版本下运行。
因此应该尽量安装更高版本的CUDA

重新安装稍高版本后这个cell（模型定义）没有运行超时但提示还在（又换了最新版本提示就无了）后验证模型又遇到新问题

所以从头整理一下整个逻辑。

从头捋了一遍之后成功运行了TOT

【传数据集到服务器】
scp -P 20022 -r G:\AAA\Tasks\pytorch-master\pytorch-master\bert-sst2\sst2_shuffled.tsv suntingyu@xx.xx.xx.xxx:/data/home/suntingyu/BertProject

#从本地上传文件如果是传文件夹就要-r, 单个文件不需要

【cmd显示】
C:\Users\Administrator>scp -P 20022 -r G:\AAA\Tasks\pytorch-master\pytorch-master\bert-sst2\sst2_shuffled.tsv suntingyu@xx.xx.xx.xxx:/data/home/suntingyu/BertProject
sst2_shuffled.tsv 100% 1144KB 1.7MB/s 00:00
————————————————————————————————————————

【卸载anaconda】
rm　-rf /data/home/suntingyu/anaconda3
注释掉.bashrc的路径
【重装anaconda】
#https://repo.anaconda.com/archive/找对应版本
wget https://repo.anaconda.com/archive/Anaconda3-2019.10-Linux-x86_64.sh
suntingyu@ps-30802:~$ chmod +x Anaconda3-2019.10-Linux-x86_64.sh
suntingyu@ps-30802:~$ /data/home/suntingyu/Anaconda3-2019.10-Linux-x86_64.sh

conda env list
#创建虚拟环境
conda create -n pytorch python==3.7

==> WARNING: A newer version of conda exists. <==
current version: 4.7.12
latest version: 22.9.0

Please update conda by running

$ conda update -n base -c defaults conda

conda env list
# conda environments:
#
base * /data/home/suntingyu/anaconda3
pytorch /data/home/suntingyu/anaconda3/envs/pytorch

(base) suntingyu@ps-30802:~$ conda --version
conda 22.9.0

#激活虚拟环境
conda activate pytorch
#退出环境
conda deactivate

———————————————————————————————————————————————————————————————————————
#换清华源
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/msys2/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/conda-forge/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/peterjc123/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/pytorch/
conda config --set show_channel_urls yes

#安装pytorch
conda install pytorch torchvision torchaudio cudatoolkit=11.3 #把官网最后-c pytorch 去掉

#安装包
conda install package_name
#卸载包
conda remove package_name
#显示所有安装的包
conda list
#删除虚拟环境命令
conda remove -n env_name --all

#安装pytorch完成检测
(pytorch) suntingyu@ps-30802:~$ python
Python 3.7.0 (default, Oct 9 2018, 10:31:47)
[GCC 7.3.0] :: Anaconda, Inc. on linux
Type "help", "copyright", "credits" or "license" for more information.
>>> import torch
>>> print(torch.__version__)
1.12.1
>>> print(torch.cuda.is_available())
True

pip install transformers