Macbook pro外接显卡实现深度学习

最新推荐文章于 2024-06-23 09:47:55 发布
最新推荐文章于 2024-06-23 09:47:55 发布
阅读量3.1w 收藏 52
点赞数 15
分类专栏： 机器学习 文章标签： Mac GPU 显卡 深度学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jiujiu31415/article/details/86485357
版权

耗时一整天加一晚上终于成功了安装配置外接GPU并运行深度学习案列

故事的缘由

2017年底鬼使神差的买了个macbook，放在家里吃了一年灰，心想还是要用起来啊。目前主要从事数据挖掘机器学习的工作，需要搞搞深度学习，于是上网查攻略，如何使用mac连接GPU进行深度学习，最后查到的方案是使用游戏盒子AORUS GTX 1070 GAMING BOX来连接。但是很多攻略使用的系统都是10.12的，10.13.1的极少，再加上京东下面的各种差评，抱着忐忑的心情去京东买了一个，拿回来心就凉了半截，这包装像是被退货的东西，包装有磨碎，还好打开里面，外壳没有磨损，螺丝口也没有，应该没被人拆过，那我就姑且试试吧。之前问了京东客服苹果设备必须要外接显示器才可使用，又去搞了台显示器。好了，硬件设备准备好了，开始头疼的安装工作。

配置

  • 硬件
    我的系统版本

macOS版本10.13.1
macOS版本10.13.1
GPU：AORUS GTX 1070 GAMING BOX

  • 软件
    WebDriver-378.10.10.10.20.109.pkg
    NVIDIAEGPUSupport ：NVDAEGPUSupport-v2.pkg
    Python 3.7
    Xcode Version 8.3.1
    CudaToolkit: cuda_9.1.128_mac
    CUDNN: cudnn-9.1-osx-x64-v7-ga.tar

组装机诡异事件

由于macbook pro 13寸 2017款支持雷电3接口，买的游戏盒子也是雷电3接口的，按照说明书连好各种线，显卡的DVI接口接外接显示器，显卡的雷点3接口接mac，显卡插上电源同时又可以给笔记本充电，免除了再接电源线的烦恼。但是诡异的事情来了，电脑开机以后要识别显卡必须拔掉显卡的电源线，仅仅是不连接mac都是不行的，必须拔掉显卡电源线！！！在登录界面再连接好显卡的电源线和雷电3的线。之后输入mac密码登录进系统。而关机的时候不拔掉显卡，电脑关机后会重启，有时还会让电脑绿屏，甚是诡异。在显卡驱动安装好以后，显卡的正常状态是彩灯会亮起（如下图），后面的两个小风散会转动，没有装好驱动的时候灯是不会点亮的。下面开始安装显卡驱动和各种软件。
在这里插入图片描述

显卡驱动安装

  • 安装WebDriver：

https://www.insanelymac.com/forum/topic/324195-nvidia-web-driver-updates-for-macos-high-sierra-update-december-7-2018/
在该网页上下载10.13.1对应的的版本，我下载的是109版本的webdriver
在这里插入图片描述
打开安装包进行安装

  • 关闭sip

重启电脑，黑屏时候长按 command+R进入恢复模式，选择命令行工具，输入csrutil disable 这样就关闭了sip

注意：安装两个软件，在安装的注意在安全与隐私处选择允许安装

在这里插入图片描述

安装好两个软件后，关闭电脑，黑屏时拔掉显卡电源和连接电脑的线，开机之后在登录窗口出现时连接上显卡的电源，再连接上mac，同时保持外接显示器电源打开状态，如果不打开外接显示器，mac输入密码后会一直卡在登录界面。登录后看到系统报告里多一张显卡（如下图所示），那么就表明已经成功外接显卡。
在这里插入图片描述

下面开始搭建深度学习环境，来条分割线

XCode安装

下载链接如下，需要先进行注册登录，我下载的是8.3.1版本，链接地址：
https://developer.apple.com/download/more/
在这里插入图片描述
下载以后按照向导进行安装

CUDA和CUDNN安装

  • cuda Toolkit安装

英伟达显卡做深度学习需要cuda和cudnn的支持，先安装cuda Toolkit，下载地址：https://developer.nvidia.com/cuda-toolkit-archive
我这里使用的是9.1版本，
在这里插入图片描述

安装好之后，配置 CUDA 环境，打开终端，编辑 ~/.bash_profile 文件

vi ~/.bash_profile

添加环境变量

export CUDA_HOME=/usr/local/cuda
export DYLD_LIBRARY_PATH="$CUDA_HOME/lib:$CUDA_HOME/extras/CUPTI/lib"
export LD_LIBRARY_PATH=$DYLD_LIBRARY_PATH
export PATH=$DYLD_LIBRARY_PATH:$PATH
export flags="--config=cuda --config=opt"

重启bash_profile

. ~/.bash_profile

检测CUDA能否正常运行：

cd /usr/local/cuda/samples
sudo make -C 1_Utlities/deviceQuery
./bin/x86_64/darwin/release/deviceQuery

如果最后显示 Result = PASS，那么CUDA就工作正常

  • cuDNN下载
    下载cudnn需要先进行注册，打开链接找到对应的cuDNN进行安装，我这里选择的是7.0版本。
    https://developer.nvidia.com/rdp/cudnn-download
    在这里插入图片描述
    下好后直接把cudnn压缩包放到这下面/Developer，这是在安装CUDA的时候他就帮你建好的一个路径。
sudo mv 自己的路径/cudnn-9.1-osx-x64-v7-ga.tar /Developer/

然后解压缩包


sudo tar xvf cudnn-9.1-osx-x64-v7-ga.tar

cudnn与cuda合并

sudo mv /Developer/cuda/include/cudnn.h /Developer/NVIDIA/CUDA-9.1/include/
sudo mv /Developer/cuda/lib/libcudnn* /Developer/NVIDIA/CUDA-9.1/lib/
sudo ln -s /Developer/NVIDIA/CUDA-9.1/include/* /usr/local/cuda/include/
sudo ln -s /Developer/NVIDIA/CUDA-9.1/lib/* /usr/local/cuda/lib/

确认/Developer/NVIDIA/CUDA-9.1/lib和include文件夹中能看见cudnn中的文件则合并成功了

tensorflow安装

  • 建立python虚拟环境

首先安装Anoconda，可以直接下载安装，具体安装步骤不再赘述。
https://www.anaconda.com/download/#macos

  • 创建python虚拟环境
    这里选用的是python3.7版本，虚拟环境命名为tensorflow-gpu，python使用3.7版本，打开命令行工具输入
conda create -n tensorflow-gpu python=3.7
  • 下载编译好的tensorflow

由于tenserflow 1.1以后就没有支持macos了，所以上网找到编译好的tenserflow gpu版本 ，下载红框中的whl
https://github.com/TomHeaven/tensorflow-osx-build/releases

在这里插入图片描述
可以看见红框中的版本正是需要cuda 9和cudnn7
在这里插入图片描述
下载解压安装红框的的版本

unzip tensorflow.whl.zip
pip install tensorflow*.whl

好了tensorflow安装完了，安装过程中需要注意版本的匹配问题，如果版本cuda和cudnn版本不匹配，则tensorflow在run的时候可能会卡死。

算力提升效果

在这里插入图片描述
上图使用CPU
在这里插入图片描述
上图使用GPU

使用GPU以后基本上有20倍的加速

测试代码是《tensorflow实战》中提供的源码：
www.broadview.com.cn/30912
使用的是6_1_AlexNet.py的代码，IDE用的pycharm，注意在使用GPU的时候需要选择虚拟环境为tensorflow-gpu 的解释器，并且在函数run_benchmark中添加两行，否则会报内存不够的错误。
在这里插入图片描述

参考文章：
https://blog.csdn.net/hanlin_tan/article/details/78345204
https://blog.csdn.net/wz22881916/article/details/78807993/
https://blog.csdn.net/ssujoensiang/article/details/78620616
https://www.kocpc.com.tw/archives/162983

wonder_2025
关注
  • 15
    点赞
  • 踩
  • 52
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
Macbook Pro 外接显卡实现Tensorflow GPU运行之环境配置（重点）
weixin_38250514的博客
05-31 2291
Macbook Pro 外接显卡实现Tensorflow GPU运行 MacOS 重装 外接显卡（内屏输出） 环境配置（重点） Tensorflow GPU 配置 环境配置 准备工作 显卡：GTX 1080TI 11G 显卡坞：Mantiz （技嘉的Gamingbox应该也可以） 显卡欺骗器（有条件的配个外屏吧，毕竟外屏转内屏输出损耗还是挺大的） MacOS： 雷电3接口 安装步骤 macOS 系统安装（见blog1） CUDA配置 cuDNN配置 Tensorflow配置（见blog4） C
Win10笔记本用雷电3接口外接显卡加速tensorflow深度学习步骤
kevinup的博客
11-05 1万+
简介：最近入手了一块rtx3060，但自己的主力设备是笔记本，于是萌生了通过外接显卡来加速深度学习的想法，配置过程中遇到一些小问题，经过调试最后解决了，现在简单把整个过程涉及的要点提炼出来，希望能帮助到有相同需求的人。 笔记本设备：Dell Precision 7540 操作系统：Windows 10 专业工作站版 20H2 19042.985 显卡拓展坞：雷蛇（Razer）战核 Core X 幻彩版 外接显卡：Nvidia Geforce Rtx 3060 Ultra W OC 12G L 注意
mac m1 m2 深度学习环境（pytorch）配置
TigerZ*的博客
06-23 1万+
在mac M1 M2上配置Python 深度学习开发环境（pycharm、openCV、pytorch）
发现LaTeX的优雅：携手XeTeX步入专业排版的世界
最新发布
gitblog_00069的博客
06-23 460
发现LaTeX的优雅：携手XeTeX步入专业排版的世界 项目地址:https://gitcode.com/dartar/The-Beauty-of-LaTeX 项目介绍 在数字文档的浩瀚海洋中，有一颗璀璨的明珠——LaTeX，以其强大的排版系统和学术界的广泛认可而著称。今天，我们要介绍的是一个独特的开源项目：“The Beauty of LaTeX”，由Dario Taraborelli于2008...
TensorFlow2.4可以在MacBook Pro/Mac Pro上利用GPU做机器学习训练了
田海立@CSDN
11-22 6600
之前MacBook上TensorFlow只能利用CPU做训练，TF2.4开始可以利用GPU做训练了，并且不管是M1的MacBook Pro，还是Intel架构的MacBook Pro还是Mac Pro都是支持的。Apple披露这一信息，并且po出性能对比数据。
ubuntu笔记本外置显卡开展深度学习
张鹏的博客
01-12 6850
雷蛇灵刃笔记本+雷电3外置显卡坞：ubuntu18+pytorch和tenorflow开展深度学习1. 软硬件准备1.1 硬件配置1.2 系统2. 具体步骤2.1 给雷蛇笔记本安装ubuntu18.04LTS2.2 设置启动项2.3 在ubuntu上配置环境附件conda虚拟环境创建、复制、删除、切换 [原创文章，若有参考请引用，尊重他人劳动成果] 长期以来，深度学习研究都依赖于台式机+高性能显卡...
在Ubuntu中使用雷电3外接显卡（eGPU）进行深度学习
qq_41856057的博客
09-07 7991
种种很凑巧的因素，需要用这么一套设备做深度学习。 笔记本是联想yoga s730，两年前在某多多入手，显卡坞是技嘉gaming box+GTX1070，某鱼入手。 折腾了一上午，踩了一些坑，终于把这东西配置好了，下面记录并分享一下过程（主要的坑反而在打驱动上） 1. 笔记本安装好Ubuntu系统 不多解释=。= 2. 笔记本接好显卡坞 2.1 buntu系统是支持雷电三设备的，在插好显卡后，系统应该会有提示。 没有提示也没关...
『开发技巧』MacbookM1芯片深度学习环境配置最全教程：简明安装开发TensorFlow与PyTorch
简明AI工作室
03-20 8431
​ 最近云哥 @吃货本货 问小宋（笔者）如何在Apple的M1芯片进行深度学习开发，恰逢最近M1开发生态都趋于稳定，就把安装步骤梳理下分享出来。 ​
15年15寸MACBOOKPRO蓝牙驱动
11-06
标题中的“15年15寸MACBOOKPRO蓝牙驱动”指的是为2015年款15英寸MacBook Pro笔记本电脑提供的蓝牙驱动程序。这款驱动是专门为解决或更新该特定型号MacBook Pro上的蓝牙功能而设计的。在苹果设备中，蓝牙驱动用于管理...
macbook pro 样机mockup .psd素材下载
04-20
1. **Macbook Pro样机**：Macbook Pro是Apple公司推出的高端笔记本电脑系列，以其轻薄设计、高性能和Retina显示屏而著名。在设计中，Macbook Pro样机常被用作展示网页、应用界面、图形设计等作品的平台，以真实地...
MACBOOKPRO A1278完美声卡、无线网卡驱动
11-26
在苹果的MACBOOKPRO A1278这款笔记本电脑中，用户可能会遇到在安装Windows 7操作系统后，遇到声卡及无线网卡功能无法正常工作的问题。为了解决这些问题，我们可以借助特定的驱动程序来恢复这些硬件的功能。下面将...
Macbook Pro显卡是什么.docx
09-26
MacBook Pro是一款由苹果公司推出的高性能笔记本电脑，其显卡配置是NVIDIA GeForce GT 650M搭配Intel GMA HD 4000的双显卡解决方案。这样的设计允许用户在性能和节能之间找到平衡，满足日常计算需求的同时，也能提供...
MacBook Pro XA2固件
04-10
MacBook Pro XA2固件
Mac上使用GPU加速训练模型
weixin_46351593的博客
05-24 2451
上一篇文章中我介绍了使用pytorch的一个完整模型训练套路，其中没有使用gpu，如果要使用gpu的话，win上我们可以使用cuda，mac上可以使用mps，而我自己是mac电脑，需要进行如下修改。
杂记-Macbook Pro M1芯片能玩深度学习吗？
热门推荐
面壁者
11-21 2万+
介绍 苹果公司在2020年11月的产品发布会中展示了有史以来第一款基于Apple自研M系列处理器的Apple三款新Mac，包括新的M1 MacBook Air，M1 MacBook Pro和M1 Mac mini。 Apple M1 芯片是首款专为 Mac 打造的 SoC 芯片。它封装了数量惊人的 160 亿个晶体管，而且将中央处理器、图形处理器、各种连接功能、其他重要组件和控制器统统集成在同一块小小的芯片上。M1 芯片由 Apple 自主设计，为 Mac 带来强大的性能、量身打造的技术，以及出类拔萃的能
Mac系统搭建深度学习环境详细教程
柏拉图工作室-AI学科
10-14 3312
下载Miniconda Miniconda的官网：https://docs.conda.io/en/latest/miniconda.html 官网下载速度慢，直接去清华镜像网站下载红框，框出来的版本：https://mirrors.tuna.tsinghua.edu.cn/anaconda/miniconda/ 安装Miniconda 将下载好的Miniconda文件放到home目录下 出现许可协议，如下图： 提示：安装需要时间，请耐心等待 虚拟环境常用操作 更换国内源 执行：vim .
【深度学习】外置显卡选购及搭建环境
Saropetry的博客
09-23 3640
卷首语：由于软硬件发展迅速，本文相关信息预计有效期到2019年上半年。 为什么需要显卡？ 显然这是一个不言自明的问题，看看用CPU训练时长的绝望。DL是个烧钱的行当。 为什么是外置显卡？ 可以这样： 也可以这样： 土豪可以出门左转了。 对于已有笔记本，不想再添置一个机箱的人，外置显卡是性价比最高的选择。 已经有人算好经济帐： 最终我选择： 那款外置显卡扩展坞？ 我的选择Mantiz。此处应有广告费。 更多关于此款外置显卡的信息可点击这里查看。 ...
2018 Macbook pro 15（10.13.6）安装Nvidia 1070（Aorus Gaming Box）显卡驱动
ignoreyou的博客
12-18 1万+
电脑详细配置：      MacBook Pro 15" (2018)      CPU: 2.6 GHz Intel Core i7 (i7-8850H)      GPU(s): Intel UHD 630, Radeon Pro 560X      Aorus gaming box 1070      macOS 10.13.6 一、设置MAC 1.1 备份mac系统 1.2 关闭SI...
MacBook外置显卡eGPU折腾笔记
weixin_34414196的博客
12-25 5068
MacBook外置显卡eGPU折腾笔记 硬件选购 当今市场上个人电脑的独立显卡，基本上能选的只有NVIDIA和AMD了，如果你想买外置显卡来打游戏的话，NVIDIA和AMD的都可以，但如果是像我一样准备用来做深度学习加速的，那最好还是选择NVIDIA了。 另外，如果要用来做深度学习加速，一定要查看英伟达官方网站，必须是支持CUDA的显卡才行，因为现在大多数的深度学习框架，底层都是调用GPU的CUD...
macbookpro外接显示器分辨率
09-19
MacBook Pro外接显示器的分辨率可以根据显示器的最大分辨率和MacBook Pro的支持情况来确定。MacBook Pro通常支持多种分辨率选项，根据显示器的规格和你的需求可以选择最合适的分辨率。 首先，你需要了解你的显示器的最大分辨率。这通常可以在显示器的规格说明书或者制造商的官方网站上找到。一般来说，显示器的最大分辨率越高，显示的图像越清晰。 然后，你需要确认你的MacBook Pro的支持情况。你可以在Apple的官方网站上找到关于不同型号MacBook Pro支持的外接显示器分辨率的详细信息。一般来说，MacBook Pro支持的外接显示器分辨率也取决于它的型号和配置。 一旦你确定了你的显示器和MacBook Pro的分辨率支持情况，你可以通过以下步骤来设置外接显示器的分辨率：先连接你的MacBook Pro和显示器，然后打开“系统偏好设置”，点击“显示器”，在显示器选项卡中选择你想要的分辨率。 总而言之，MacBook Pro外接显示器的分辨率取决于显示器的最大分辨率和MacBook Pro的支持情况。你可以根据这些信息来选择最合适的分辨率，以获得更好的显示效果。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值