Ubuntu20.4 深度学习环境配置及使用总结

最新推荐文章于 2024-05-11 12:05:26 发布
最新推荐文章于 2024-05-11 12:05:26 发布
阅读量712 收藏 2
点赞数
分类专栏： 笔记 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/godblesszzc/article/details/113330457
版权

Ubuntu20.4 深度学习环境配置及使用总结

声明：个人使用总结，仅供参考。
最近遇到一些在WINDOWS下无法完成的任务，被逼无奈，重回Linux。

windows下系统安装

  • 1 在硬盘上压缩出一块空间
  • 2 制作U盘镜像，设置U盘启动
  • 3 在启动界面进入Ubuntu，对空白盘进行分区
    /boot, /, /home, /swap
  • 4 设置启动分区为/boot
  • 5 ubuntu20.04配置国内apt源

环境配置

    export PATH=/usr/local/cuda-/bin${PATH:+:${PATH}}
    export LD_LIBRARY_PATH=/usr/local/cuda-/lib64${LD_LIBRARY_PATH:+:${LD_LIBRARY_PATH}}
  • 解压cudnn，移动带/usr/local/cuda时出错，sudo cp -r include /usr/local/cuda/
    错误：cp: 无法以目录’include’ 来覆盖非目录’/usr/local/cuda/include’
    原因：出现这种情况是 Linux 拷贝文件时权限不够，运行命令 sudo nautilus，
    打开一个具有管理员权限的文件管理器，然后就可以在不切换到管理员的条件下拷贝文件，然后进行复制粘贴，成功

安装Anaconda3

  • sudo bash anaconda3-linux-
    在安装目录时，设置了/usr/local/anaconda3，结果可能是用户权限的原因，一直在/usr/ocal/下，找不到文件，并且在~/.bashrc添加了环境变量，仍然无法找到conda(后来发现是路径名称写错了，local写成了lcoal…)，无奈，通过文件搜索找到/usr/local/anaconda3,然后删除，将anaconda3重新安装在了/home/username/Programiles/anaconda3下面，设置环境变量，成功

安装pycharm

https://www.jb51.net/article/185785.htm

安装pytorch1.5.1, torchvision0.6.0

  • 要注意安装和自己CUDA版本对应的pytorch，如果添加了清华源，pip install 直接安装，速度很快，但是看了下清华源的对应torch包，并没有指定CUDA版本（经测试安装的torch可以使用）。
    为了以防万一，还是建议：
    – 要么利用pytorch官方给定的命令安装（网速慢）
    – 在官网手动下载对应的wheelhttps://download.pytorch.org/whl/torch_stable.html

遇到的问题

  • 编译时提示找不到路径：unable to execute ‘:/usr/local/cuda-10.1:/usr/local/cuda-10.1/bin/nvcc’: No such file or directory. 解决方法： 看了下在bashrc里已经添加了CUDA_HOME,关机重启依然出错。原因可能是export方式不对：javascript export CUDA_HOME=$CUDA_HOME$/usr/local/cuda-10.1，这样每次刷新bashrc,发现CUDA_HOME都会添加一次该路径。最后修改为CUDA_HOME=/usr/local/cuda-10.1问题解决
  • 运行tensorflow出错：Could not load dynamic library 'libcudnn.so.7'; dlerror: libcudnn.so.7: cannot open shared object file: No such file or directory; LD_LIBRARY_PATH: /usr/local/cuda-10.1/lib64:/usr/local/cuda-10.1/targets/x86_64-linux/lib
    原因：安装的CUDA10.1，默认的CUDNN版本=7.6.5，我安装的8.0.2,执行以下代码创建软连接成功解决
		cd /usr/local/cuda-10.1/lib64
		sudo chmod +r libcudnn.so.7.6.5
		sudo ln -sf libcudnn.so.7.6.5 libcudnn.so.7
		sudo ln -sf libcudnn.so.7 libcudnn.so
		sudo ldconfig
  • 利用torch训练时出现错误（windows下无此错误）：
```qt.qpa.plugin: Could not load the Qt platform plugin "xcb" in "/home/zzc/anaconda3/envs/SmartConstruction/lib/python3.7/site-packages/cv2/qt/plugins/platforms/" even though it was found.
This application failed to start because no Qt platform plugin could be initialized. 
Reinstalling the application may fix this problem.
Available platform plugins are: xcb (from /home/zzc/anaconda3/envs/SmartConstruction/lib/python3.7/site-packages/cv2/qt/plugins/platforms/), eglfs, linuxfb,
 minimal, minimalegl, offscreen, vnc, wayland-egl, wayland, 
 wayland-xcomposite-egl, wayland-xcomposite-glx, webgl, xcb. ```

	费了很大劲，尝试了如下几种方法：
  1. sudo apt-get install libx11-dev libxext-dev libxtst-dev
    sudo apt-get install xlibmesa-gl-dev libglu1-mesa-dev
    结果提示：E: 无法修正错误,因为您要求某些软件包保持现状,就是它们破坏了软件包间的依赖关，上网查了很多方法，无法解决，最后重装了系统。。。。。
    重装后可以成功运行上面两条命令，可是错误依然存在。。。。
    1. 重装PyQt5，无效
    2. 安装pencv-contrib-python，重装opencv-python无效
    3. 在训练文件的开头加上：
      envpath = ‘/data/xx/xx/venv/lib/python3.6/site-packages/cv2/qt/plugins/platforms’
      os.environ[‘QT_QPA_PLATFORM_PLUGIN_PATH’] = envpath， 无效
    4. sudo apt-get install libxcb-xinerama0 ，成功。这篇文章写的很好：https://www.jb51.net/article/193024.htm
      千万不能随便安装系统。。。。。。。。。。。。。。。。。。费神费力。
  • 安装gcc，g++编译器出错，E: 无法定位软件包 gcc-7
    原因是添加的Ubuntu镜像源不够，找不到相应的包：
# 清华源
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic main restricted universe multiverse
deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic main restricted universe multiverse
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-updates main restricted universe multiverse
deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-updates main restricted universe multiverse
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-backports main restricted universe multiverse
deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-backports main restricted universe multiverse
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-security main restricted universe multiverse
deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-security main restricted universe multiverse
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-proposed main restricted universe multiverse
deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ bionic-proposed main restricted universe multiverse

# 科大源
deb https://mirrors.ustc.edu.cn/ubuntu/ bionic main restricted universe multiverse
deb-src https://mirrors.ustc.edu.cn/ubuntu/ bionic main restricted universe multiverse
deb https://mirrors.ustc.edu.cn/ubuntu/ bionic-updates main restricted universe multiverse
deb-src https://mirrors.ustc.edu.cn/ubuntu/ bionic-updates main restricted universe multiverse
deb https://mirrors.ustc.edu.cn/ubuntu/ bionic-backports main restricted universe multiverse
deb-src https://mirrors.ustc.edu.cn/ubuntu/ bionic-backports main restricted universe multiverse
deb https://mirrors.ustc.edu.cn/ubuntu/ bionic-security main restricted universe multiverse
deb-src https://mirrors.ustc.edu.cn/ubuntu/ bionic-security main restricted universe multiverse
deb https://mirrors.ustc.edu.cn/ubuntu/ bionic-proposed main restricted universe multiverse
deb-src https://mirrors.ustc.edu.cn/ubuntu/ bionic-proposed main restricted universe multiverse
#网易源
deb http://mirrors.163.com/ubuntu/ bionic main restricted universe multiverse
deb http://mirrors.163.com/ubuntu/ bionic-security main restricted universe multiverse
deb http://mirrors.163.com/ubuntu/ bionic-updates main restricted universe multiverse
deb http://mirrors.163.com/ubuntu/ bionic-proposed main restricted universe multiverse
deb http://mirrors.163.com/ubuntu/ bionic-backports main restricted universe multiverse
deb-src http://mirrors.163.com/ubuntu/ bionic main restricted universe multiverse
deb-src http://mirrors.163.com/ubuntu/ bionic-security main restricted universe multiverse
deb-src http://mirrors.163.com/ubuntu/ bionic-updates main restricted universe multiverse
deb-src http://mirrors.163.com/ubuntu/ bionic-proposed main restricted universe multiverse
deb-src http://mirrors.163.com/ubuntu/ bionic-backports main restricted universe multiverse
zhaoali0709
关注
专栏目录
Ubuntu深度学习的环境配置
qq_40971025的博客
04-18 662
前几天，我们导师派遣一位师兄躲在导师车里秘密潜入学校，目的是为了在学校实验室里几台机器上装配远程操控软件，方便我们在家里就可以实现对网络的训练。（没有云服务器的寒酸） 结果分给我了一台我从来没就没有用过的电脑，对上面的环境啥的都不清楚，就这样我就开始了长达一天多的Ubuntu深度学习环境的配置过程。其实我原先在Windows上配置过不止一次环境了，对于整个流程是驾轻就熟的，但是在Ubu...
2021 年最新版 Ubuntu 20.04 配置 Caffe 深度学习环境
s.M.i.L.e
07-15 5099
前言 本文写于 2021 年 7 月 15 日。若按本文的方法配置出现了错误，请留意是否距离写作时间过远。 请确保你的电脑显卡是 NVIDIA 显卡。本文不适用于 AMD 显卡和 Intel 集成显卡。 一、更新系统软件包 在终端中执行如下命令，将系统内核和基础组件升级至最新版本，否则后续编译会因为组件版本问题遇到不可预料的错误。 # 更新软件仓库缓存 sudo apt-get update # 更新所有软件包至最新版本 sudo apt-get upgrade -y # 更新的过程中可能会
Ubuntu20.4系统配置，环境搭建
猿起于此
07-12 562
1. https://zhuanlan.zhihu.com/p/142014944
Ubuntu20.04自学记录
duxingzheyun的博客
09-03 280
初学Linux开发，这几天自学搭建环境，记录踩坑过程。 1.镜像下载 在清华大学开源软件镜像站下载iso文件： 地址：https://mirrors.tuna.tsinghua.edu.cn/ubuntu-releases/releases/20.04/?C=M&O=A 2.安装虚拟机 步骤与安装Windows虚拟机一样 之后等待安装 ...
安装完成Ubuntu20.04之后要做的事：基础配置、界面美化、异常处理、常用软件的安装与常用命令
zardforever123的博客
06-29 2万+
换源、安裝显卡驱动、设置新建文件模板、卸载系统软件、安裝中文输入法、双系统时间同步、修改双系统启动顺序以及美化grub界面、自动挂载Windows盘、设置录屏时间无限制、系统卡死的处理办法、主题美化、安装Chrome浏览器并加入apt更新、安裝VScode、WPS、PDF阅读器Foxit Reader、安裝与卸载微信QQ、安裝视频播放器smplayer，系统备份与恢复
安装Ubuntu20.04--配置网络，修改eth0
最新发布
weixin_52670201的博客
05-11 2382
2.不同版本选择，点击其他下载。6.选择语言，Ubuntu20.04（直接不提供中文，烦，我泱泱大国.....）ssh远程连接安装，后续要使用Xshell 远程连接，所有要选中 （空格选中）4.选择Ubuntu20.04镜像，开启虚拟机立刻按F5键，进入辅助模式。7.网络配置 （直接按Tab键，选择选项），选择下图位置。默认（回车），方向键选择Manual（手动配置）选择语言（回车）--> 安装服务版（回车）选择仅主机模式（不想改可以忽略）9.分区 （这里我选择手动分区）直接按（回车），选择IPv4。
【Ubuntu20.04 搭建深度学习环境】
QZQZQZ97的博客
05-09 937
1. cuda 安装 初次安装cuda 建议直接使用系统推荐驱动版本 Ctrl+Alt+T 打开终端，在终端中输入如下命令： ubuntu-drivers devices 显示 (base)you@you-666:~$ubuntu-drivers devices == /sys/devices/pci0000:00/0000:00:01.0/0000:01:00.0 == modalias : pci:v000010DEd00001E89sv00001B4Csd0000134Dbc03sc00i00
Ubuntu20.4安装CUDA9.0，多版本CUDA切换
qq_42645661的博客
09-14 7440
安装CUDA前需要安装适配的gcc编译器，本文主要安装CUDA9.0对应的gcc-5与g++-5 由于ubuntu20.4默认安装gcc7版本及以上，所以要先更换源链接 sudo vim /etc/apt/sources.list 在sources.list下添加ubuntu16.04的软件源 deb http://mirrors.aliyun.com/ubuntu/ xenial main deb-src http://mirrors.aliyun.com/ubuntu/ xenial mai
tesla p100 linux,Ubuntu16.04深度学习开发环境配置（TeslaP100+cuda9.0+tensorflow）
weixin_39723010的博客
05-16 804
Ubuntu16.04深度学习开发环境配置(TeslaP100+cuda9.0+tensorflow)1. 显卡驱动安装选择对应显卡型号的驱动下载https://www.nvidia.com/Download/index.aspx?lang=cn Ctrl+Alt+F1 切换至Console 界面$ sudo service lightdm stop$ sudo nvidia-uninstall$...
Ubuntu 配置Python环境(包括Tensorflow)
king52113141314的博客
10-19 1491
1，安装miniconda https://gist.github.com/arose13/fcc1d2d5ad67503ba9842ea64f6bac35 How to Install miniconda on linux (from the command line only) # Setup Ubuntu sudo apt update --yes sudo apt upgrade --yes # Get Miniconda and make it the main Python inte.
Linux安装CUDA GCC版本不兼容
先说一下，就简单地写点儿氵文，不是博客，只是我的笔记本/工具书
11-07 3万+
环境KALI(我估计Ubuntu也是一样的) 当前NVIDIA驱动版本 455.23.05 GCC版本：Debian 10.2.0-15 老铁们一定是这样操作的： $ sudo sh cuda_10.2.89_440.33.01_linux.run Failed to verify gcc version. See log at /var/log/cuda-installer.log for details. 然后vim查看文件/var/log/cuda-installer.log 说是GCC版本不兼容
Linux安装CUDA的正确姿势
热门推荐
FlyWine的博客
08-20 17万+
Linux安装CUDA的正确姿势 CUDA（Compute Unified Device Architecture，统一计算架构）是由NVIDIA所推出的一种集成技术，是该公司对于GPGPU的正式名称。 透过这个技术，用户可利用NVIDIA的GeForce 8以后的GPU和较新的Quadro GPU进行计算。 查看显卡是否支持CUDA 输入下面命令查看电脑的NVIDIA型号： v...
基于ubuntu20.04的anaconda和cuda安装
qq_37874034的博客
05-25 1524
文章目录使用服务器训练深度学习模型环境安装(ubuntu20.04)ubuntu 20.04安装anaconda安装显卡驱动安装cuda安装（cuda 11.0)cudnn安装(cudnn 11.0) 使用服务器训练深度学习模型环境安装(ubuntu20.04) ubuntu 20.04安装 1.下载ubuntu.20.04镜像文件，使用rufus软件将U盘做成系统盘。 2.插入U盘，进入boot界面，改成U盘为第一启动项，按照ubuntu的引导流程安装ubuntu. anaconda安装 1.去网址：.
Ubuntu20.04下深度学习环境配置（不维护了）
m0_37412775的博客
10-29 4万+
Ubuntu下深度学习环境配置Ubuntu下深度学习环境配置gpu驱动Anaconda安装功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 Ubuntu下深度学习环境配置 这篇文章记录了我在配置深度学习环境时的坑。具体操作和安装包在
ubuntu16.04下微信和TIM的安装
u013844459的博客
09-30 485
ubuntu16.04下微信和TIM的安装欢迎来到我的博客1.WeChat2.TIM原博客到(2)就结束了，若安装成功，则可忽略以下步骤!!! 欢迎来到我的博客 一开始看教程时，我一脸懵；我在看完git和gitee使用教程之后，再看使用的指令，发现竟有些懂了，以下均搜集于他人博客，附链接，附原文！！ 1.WeChat 安装教程链接：https://blog.csdn.net/csyz2019/article/details/106960855 注：此文章中微信可以安装成功，qq总检测不到，不知是不是我安装方
Ubuntu20.04基本开发环境配置
weixin_44413779的博客
06-07 3181
Ubuntu Configure And Some Commands 1. dotnet core (C#) $ mkdir -p $HOME/dotnet && tar zxf dotnet-sdk-3.1.201-linux-x64.tar.gz -C $HOME/dotnet # ~/.bashrc #PATH export PATH=$PATH:$HOME/dotnet #end line add export DOTNET_ROOT=$HOME/dotnet $ source
ubuntu20.04 配置pytorch深度学习环境 + SSD目标检测
一只小菜鸟的博客
10-11 4205
0、准备工作 0.1 gcc降级 因为Ubuntu20.04自带的gcc版本为9.3，而cuda10不支持gcc-9，因此要手动安装gcc-7，命令如下： sudo apt-get install gcc-7 g++-7 设置优先使用gcc7 sudo update-alternatives --install /usr/bin/gcc gcc /usr/bin/gcc-7 9 sudo update-alternatives --install /usr/bin/g++ g++ /usr/bin/g++
VIP(虚拟IP)设置-Ubuntu
marywang56的专栏
09-01 6375
近期因为工作需要设置VIP，做简单的负载均衡，就是访问一个IP可以随机访问不同的机子。于是就想到了VIP，假设有1到5有5台机子，每个机子的ip 分别是 192.168.0.101-192.168.0.105，对外提供服务的时候使用IP为 192.168.0.107，那么只需要对每个机子再设置一个虚IP即可。使用ifconfig 显示目前的IP地址如下：使用命令设置VIP 如下：ifconfig
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值