【深度学习日记】第一天:Hello world,Hello CNN MNIST

活动地址:CSDN21天学习挑战赛

2022年08月01日 星期一 天气晴

这是一个不同寻常的周一,曾经多少次立Flag于周一荒废于周二,因此我再一次信誓旦旦地暗自下定决心:持续更文记录成长点点滴滴,从周一开始!这次将以日记的形式完成每天的学习记录,这是第一篇,也是新的开始!

严正声明:本篇日记不存在恰饭行为,仅根据笔者亲身经历编写,如有雷同,纯属巧合!

创作计划

机缘:记录深度学习小白的成长
预期:至少 21 天/篇产出分享深度学习相关笔记
憧憬:能够坚持写作不断更

时间主题内容进度
2022-08-01Hello world,Hello CNN MNIST!深度学习云端环境体验、了解深度学习框架已完成
2022-08-02深度学习,“粮草”先行掌握数据集获取途径、了解深度学习框架数据集处理方式待编写
2022-08-03深夜学习,只为“卷”–卷积神经网络入门详解以天气识别、服装图像分类为例,讲解卷积神经网络待学习

云端环境体验

笔者认为入门深度学习的拦路虎之一就是没有相应的环境去体验,就连 AnimeGAN 作者Asher Chan 都吐槽算力有限导致论文延期,当然做研究和仅仅只是学习还是有差别,毕竟我们仅仅只是学习的话,一些云厂商提供的免费算力足够我们跑些案例了。

Asher Chan 吐槽论文延期

为了避免争议,以下内容仅与笔者本人有关, 仅仅根据笔者亲身经历编写,不存在对任何云厂商的推广以及贬损。如有不适,欢迎批评指正!

​笔者大概从疫情伊始接触到人工智能相关的开发平台及框架,恰逢国内 Big4 公有云厂商提出的”普惠AI“策略落地,我真真切切地感受到”被普惠“的暖意–免费学习、免费算力甚至还各种送礼品。其实无论是国内还是国外的云厂商,对于AI开发者都有一定的扶持计划,”注册就送¥$",这不是游戏广告,而是各云厂商的推广手段之一。对于深度学习小白,可能我们真的没有本地算力,但是却有一颗虔诚学习的心,怎么办?那我们就去各平台白嫖算力呗!以下平台排名不分先后

Colab

如果有条件访问外网,可以尽情地使用 Colab, Colab 是 Colaboratory(合作实验室)的简称,借助 Colab 我们可在浏览器中编写和执行 Python 代码,并且无需任何配置、免费使用 GPU,还能轻松共享。Colab 提供编写和执行代码的交互式环境,称为 Colab 笔记本,Colab 笔记本是由 Colab 托管的 Jupyter 笔记本。因此我们无须在本地搭建开发环境,完全可以使用云端免费资源。按照 CSDN 网友的反馈,基本能白嫖到 K80 的GPU,偶尔狗屎运也会有两次T4,不过理所当然会存在限额的情况,B 乎上关于Colab免费GPU槽点还是有些的,关于 Colab 使用遇到的问题具体可参考官方文档《Colaboratory常见问题解答》
接着我们在 Colab 上实操一下深度学习入门必敲的 Hello World 案例 – MNIST手写数字识别
新建hello_CNN_MNIST.ipynb,切换到 GPU 模式,编写代码,大致效果如下图:
Colab
完整代码请参考卷积神经网络(CNN)实现mnist手写数字识别, 当前案例在 Colab 平台运行结果如下:
Colab Result: CNN MNIST
当然,想要分享给其他小伙伴进行协作也是十分方便的:
Colab Share
是不是感觉很方便?从环境搭建到模型训练再到案例分享,一套组合拳下来不到十分钟轻松搞定!
接下来我们看看国产之光,笔者认为最贴近原版 Jupyter 的 CodelLab

CodeLab

作为ModelArts Developer Groups Guangzhou 的核心组织者,笔者对ModelArts 的 CodeLab 还是有一定的了解的,几乎是看着 CodeLab 一点一滴更新迭代到现在这个相对完善的版本,关于 CodeLab 请听小生娓娓道来。CodeLab 是ModelArts推出的新功能,目前仅在北京四可体验使用,一键进入开发环境的同时预置了免费的算力规格,针对致力于打造“AI界Github”的AIGallery社区发布的Notebook样例(.ipynb格式文件),可直接在CodeLab中打开,查看他人分享的样例代码。这和上文中提到的 Colab有些类似。既然 CodeLab这么强大,我们迫不及待一睹芳颜,请让笔者为大家揭开CodeLab的神秘面纱,近距离感受“普惠AI”的“真香”!
ModelAris CodeLab
除了免费的 CPU 资源,还有免费的32G P100可供选择,基于笔者长期使用 CodeLab的经验得出:最高可获得8小时+的使用限额(PS:此处期待各位大佬能编写自动续时脚本)。
接着我们在Colab 平台导出hello_CNN_MNIST.ipynb并导出到CodeLab,开启我们的训练之旅。
CodeLab 上传文件
笔者使用的是默认的 Python 3.6 + TensorFlow 1.13.1 环境,因此代码需要简单修改,您也可以点击体验一键Run in ModelArts
CodeLab Run in ModelArts
运行结束之后我们就完整地跑通了 CNN 实现 MNIST 手写数字识别:
CodeLab Result

TIANCHI

作为国内老牌云厂商,给到的免费资源也是十分给力的, CPU 无限使用,默认给到 60 小时GPU的额度,积分到达200再送30小时,用来学习暂时能够缓解燃眉之急。官方介绍:“天池notebook集成机器学习PAI DSW(DataScienceWorkshop)探索者版,成为天池实验室底座,为大家提供完备的IDE以及丰富的计算资源”,咱先来看看大概的界面:
TIANCHI天池
在天池的Notebook中,基于Jupyter做了定制化开发,整个界面焕然一新,下图是天池运行结果:
TIANCHI
同样的,本案例使用 CPU 进行训练也是可以的,只是时间花费多一点点:
TIANCHI CPU

结语

其实云端的深度学习环境远远不不止这几种,只要您善于发现、勇于分享,我们能获得更多的免费 GPU 资源,我们相信深度学习会越来越容易上手,变得连Python 小白也能攀得起,能够训练属于自己的深度学习模型并应用到生活中去。
感谢各位能阅读至此,如您对文章有任何意见或建议,欢迎在评论区留言互动!

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: 深度学习是当今计算机科学领域最为热门的研究方向之一,其在图像分类、语言识别、自然语言处理等诸多领域都有广泛的应用。而卷积神经网络(CNN)是深度学习中最为核心的模型之一,它能够有效地提取图像的特征并进行分类。本文将介绍如何使用matlab搭建卷积神经网络。 首先,我们需要准备好所需的数据集,这是构建卷积神经网络的必要条件。可以在网上找到一些现成的数据集,如MNIST手写数字数据集,CIFAR-10图像分类数据集等等。 接下来,我们需要创建一个卷积神经网络。在matlab中,可以使用Deep Learning Toolbox来创建卷积神经网络模型。我们需要指定网络的层数、每层的神经元个数、激活函数等参数,以及网络的损失函数、优化算法等参数。 然后,我们需要将数据集分成训练集和测试集,并将其加载到matlab的工作空间中。可以使用matlab自带的数据集加载函数或者自己编写数据集加载函数来完成这一步骤。 接下来,我们需要对数据进行预处理,以便将其交给卷积神经网络进行训练。预处理包括图像的标准化、图像增强、数据扩充等操作。 最后,我们需要使用trainNetwork函数来训练我们的卷积神经网络,并使用testNetwork函数来测试网络的性能。网络训练完毕后,可以保存模型以备将来使用。 总的来说,用matlab进行卷积神经网络的搭建十分方便,并且matlab还提供了许多实用的工具箱和函数来辅助网络的训练和测试。若想深入研究深度学习,matlab是一个不错的选择。 ### 回答2: 深度学习是现代计算机科学的热门领域,它通过神经网络的层次结构来学习复杂的模式,特别是在图像、语音和自然语言处理上表现突出。Matlab是一种广泛用于数学建模、数据分析和科学计算的软件工具,也被用于深度学习领域。本文将介绍如何使用Matlab从零开始搭建卷积神经网络CNN。 首先,我们需要导入一些深度学习常用的库。例如 MatConvNet 和 VLFeat,这两个库都是由Matlab编写的,方便用户在Matlab中实现卷积神经网络。接下来,我们需要构建神经网络的模型,包括卷积层、池化层、全连接层等。这里,我们将使用卷积层、池化层交替的组合来搭建CNN模型,并设置相关的参数,例如数目、步长和大小等。 然后,我们需要准备好训练数据和测试数据,这些数据可以是图像、语音或文本等。我们需要将数据集进行预处理,例如归一化、预处理等,以确保数据数据量相等和格式标准化。接下来,我们需要定义模型的训练方法,例如使用反向传播算法以最小化误差和损失函数,而优化器可以选择常用的SGD、Adam或Adagrad等。 最后,我们需要对我们训练好的模型进行测试,测试过程中会给出一些输入样例,然后模型会输出对应的预测结果,我们可以根据这些结果来评估模型的性能和准确度。如果模型的性能不好,我们可以使用更多的层数、更多的节点或更多的数据来改善模型。 总之,使用Matlab搭建卷积神经网络的过程比较复杂,需要对深度学习的知识有一定的了解,并具备一定的程序能力。通过本文的介绍,相信读者能够初步了解到如何搭建卷积神经网络,并在实践中逐渐提高自己的能力。 ### 回答3: 在进行深度学习研究时,卷积神经网络(CNN)是一种非常常见的网络结构。使用Matlab可以高效地实现并训练CNN。下面将以一个简单的手写数字识别任务为例,从0开始介绍如何在Matlab中搭建和训练卷积神经网络。 首先需要导入手写数字数据集。在Matlab中已经内置了一个手写数字数据集,可以使用以下命令导入: ``` digitDatasetPath = fullfile(matlabroot,'toolbox','nnet','nndemos','nndatasets','DigitDataset'); imds = imageDatastore(digitDatasetPath, 'IncludeSubfolders', true, 'LabelSource', 'foldernames'); ``` 接下来,需要设置网络结构和超参数。这里选择一个包含两个卷积层和两个全连接层的CNN,同时设置学习率、迭代轮数等超参数。 ``` layers = [ imageInputLayer([28 28 1]) convolution2dLayer(3,16,'Padding','same') batchNormalizationLayer reluLayer maxPooling2dLayer(2,'Stride',2) convolution2dLayer(3,32,'Padding','same') batchNormalizationLayer reluLayer maxPooling2dLayer(2,'Stride',2) fullyConnectedLayer(256) batchNormalizationLayer reluLayer fullyConnectedLayer(10) softmaxLayer classificationLayer]; options = trainingOptions('adam', ... 'MaxEpochs',20,... 'MiniBatchSize',128, ... 'InitialLearnRate',0.001, ... 'Shuffle','every-epoch', ... 'Verbose',false, ... 'Plots','training-progress'); ``` 然后可以开始训练模型。使用以下命令可以开始训练: ``` net = trainNetwork(imds,layers,options); ``` 最后,可以使用测试集对训练好的模型进行评估,并计算出模型的准确率: ``` YPred = classify(net,augimdsTest); YTest = imdsTest.Labels; accuracy = sum(YPred == YTest)/numel(YTest); ``` 通过这个例子,可以看出使用Matlab搭建和训练卷积神经网络是非常简单的。同时,Matlab提供了许多预训练模型和工具箱,可以方便地进行深度学习研究和应用。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值