深度学习（李宏毅）p5-p8笔记，Datawhale组队学习Task03

最新推荐文章于 2024-09-03 20:38:02 发布
最新推荐文章于 2024-09-03 20:38:02 发布
阅读量148 收藏
点赞数
分类专栏： 机器学习 文章分享之路
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/q7238926z/article/details/119834010
版权
本文探讨了机器学习中常见的两种问题：欠拟合和过拟合。欠拟合表示模型在训练集上表现不佳，可能由于模型复杂度过低或偏差过大。过拟合则是模型在训练集上表现良好，但对测试集预测效果差，表明模型过度学习了训练数据，具有高方差。为缓解过拟合，可以采用扩大数据集或应用正则化技术来降低模型复杂度。
摘要由CSDN通过智能技术生成

心得分享：
1、如果连训练集都不能很好拟合，就是欠拟合(Underfitting)，bias大。如果训练集可以拟合好，但测试集拟合不好，就是过拟合(Overfitting)，variance大。如果variance太大，可以通过扩大数据或者正则化(Regularization)；
2、Loss的等高线的法线方向(Gradient)；

飞速移动的代码菌
关注
专栏目录
《深度学习》李宏毅 -- task5网络技巧设计
专注大数据与人工智能技术分享，欢迎私信加群互相学习！
08-24 218
本文参考：https://blog.csdn.net/LucyLuo2020/article/details/118916216 Datawhale深度学习资料：https://datawhalechina.github.io/leeml-notes 一、梯度下降法的局限 局部最小值saddle point和鞍点local minima 优化（Optimization）损失函数失败的原因主要有2种： 1.局部最小值 (local minima)，无路可走。 2.鞍点 (saddle point)，还可
深度学习（李宏毅）p3-p4笔记，Datawhale组队学习Task02
maxmon
08-18 187
心得分享： 1、可以通过引入正则项（权重(w, weights)也加入到loss的计算中），来降低模型复杂度。其中偏置(b, bias)其实不用放入正则中，因为我们只想要更平滑的，b不会影响是否平滑； 2、通过梯度下降(GD, Gradient Descent)来调整参数，降低损失(loss)； 3、多个参数就求对应的偏导； 4、目标值真实y hat, 平均值y bar； 5、If类的也可以通过线性模型来表示，比如通过δ(Δ, 丢他, 阶跃, 德尔塔, delta)实现类似的效果，是就是6，不是就是0； 7
机器学习和深度学习 -- 李宏毅（笔记与个人理解1-6）
weixin_65403042的博客
04-05 1835
课程内容。
深度学习（李宏毅）p13笔记，Datawhale组队学习Task04
maxmon
08-23 156
心得分享： 1、前馈神经网络相当于是一层层往前迭代计算的过程； 2、神经网络分为输入层（输入层没有计算，但在此处也当作一层）、隐藏层、输出层，然后现在一般把带神经网络的模型都统称为深度学习； 3、AlexNet -> GoogleNet -> ResNet 等等，隐藏层越来越多； 4、机器学习的过程就是定义函数集、计算最好的函数、得到函数； ...
深度学习基础--Datawhale X 李宏毅苹果书 AI夏令营--学习笔记
javanaxx的博客
08-27 1117
实际上，
DataWhale AI夏令营-《李宏毅深度学习教程》笔记-task3
最新发布
m0_50972200的博客
09-03 699
所以把正向的网络在输入xt 的时候跟逆向的网络在输入 xt 时，都丢到输出层产生 yt，产生 yt+1,yt+2，以此类推。其实前面提到过了RNN架构，书中给出的例子如下图，其实也就是之前提到过的每一层的输出不知取决于当前层的输入还有上一层的输出有关，书中给出的解释是，上一层的输出结果会储存在记忆层中，这时候当前隐藏层预测结果会同时考虑当前的输入与记忆层的内容。由图可知RNN的输入来自于上一层的输出结果和当前层的输入，所以RNN常被用来预测金融市场、气象等领域，通过分析过去的数据序列预测未来的趋势。
【深度学习】李宏毅2021/2022春深度学习课程笔记 - Deep Learning Introduction
知不足而奋进，望远山而前行
12-10 2万+
这一步骤在 Deep Learning 中通常表现为建立Model。比如，建立了一个3层的全连接网络，每一层是由线性层+ReLu激活函数构成的，这就是我们定义的函数表达式。在每一个线性层中，都有未知的参数 w 和 b损失函数的值代表了真实值与预测值之间的差距，通常来说，损失函数值越小，代表模型的预测就越接近真实值。常用的损失函数如下图所示：MAE、MSE 等案例介绍已知2017年-2020年的播放量数据，通过已知的数据，训练一个模型（拟合一个函数），预测未来的播放量思路分析建立参数未知的函数表达式。
【深度学习】李宏毅2021/2022春深度学习课程笔记 - Deep Learning Task Tips
知不足而奋进，望远山而前行
12-11 2万+
如下图所示，我们会把原始训练资料分为训练集和验证集，其中假设验证集占原始训练资料的三分之一，那么就可以进行三折交叉验证，根据将原始训练数据分为三个不同的验证集和训练集，可以训练出三个模型，我们最终会选择这三个模型中，在验证集上Loss最小的作为最终模型。还是看上一节课讲的案例，2/26是星期五，按照以往的规律，星期五一般学习Deep Learning的人数都是比较少的，所以模型也认为2/26日播放量应该比较少，然而事实是，2/26反而是播放量最多的一天。尝试不同的模型，对比不同模型下，训练过程的Loss。
李宏毅深度学习|Datawhale-7月 Task00
星宇痕的博客
07-11 196
简述组队打卡流程
李宏毅机器学习--Datawhale202210.zip
04-08
进入21世纪，深度学习成为机器学习领域的重要突破，采用多层神经网络模型，通过大量数据和强大的计算能力来训练模型，在计算机视觉、自然语言处理和语音识别等领域取得了显著的成果。 机器学习算法在各个领域都有...
李宏毅老师2021深度学习课程笔记.pdf
10-08
李宏毅老师的2021深度学习课程笔记中提到了几个关键知识点，涉及了深度学习训练技巧以及理论基础。 首先，课程提到了模型泛化能力的重要性，尤其是在模型的测试集划分上。这里提到了两种测试集的划分：public ...
李宏毅深度学习学习笔记 Task0
08-15
在探讨李宏毅深度学习学习笔记Task0的内容之前，我们需要对深度学习的基本概念有所理解，然后才能根据笔记内容提取具体的知识点。深度学习是机器学习领域的一个分支，它通过建立、训练和应用多层的人工神经网络来...
《深度学习》李宏毅 -- task2 回归
专注大数据与人工智能技术分享，欢迎私信加群互相学习！
08-18 390
深度学习》李宏毅 -- task2 回归笔记，介绍回归定义、用法及相关案例，进行步骤展示总结。
『001』如何在自己的网页里引入一个聊天机器人(。・∀・)ノ
热门推荐
maxmon
02-15 26万+
目录前言如何引入如何使用可用的命令大致的原理项目地址感谢 前言 我们常常能一些中二攻城狮的博客中看到一个聊天机器人。 那么，他们是怎么实现的呢？ 其实，我们可以通过鼠标右键，代码调试来看到它们的源码，来学习他们的创建方法。 今天，就让我们直接来引用一下先感受感受吧(✿◕‿◕✿)！ 如何引入 通过HTML <!--需要将天奇机器人代码放入body的底部--> &lt...
『002』写个象棋AI来和爷爷下棋( o=^•ェ•)o ┏━┓
maxmon
02-18 25万+
目录前言先画一个棋盘放点棋子在上面呗所以，怎么能少了规则呢？车逻辑马逻辑象逻辑士逻辑将逻辑炮逻辑卒逻辑来到了大家会感兴趣的AI部分了实现了AI后，不能走也不行啊判断点击的位置得出选中棋子的可走路径（可落子点）小花絮爷爷口中的那个游戏项目地址预览地址特别感谢 前言 小时候一直和爷爷下象棋，可是除了耍赖，就从来没有赢过(lll￢ω￢) 有一次做梦…我写出了一个能赢过爷爷的象棋AI，但却没有机会...
『003』闲下来，写个算24点的工具吧(ノωく)
maxmon
02-21 25万+
目录前言算法研究核心代码最终效果小插叙体验地址项目地址特别感谢 前言 昨天在群里看到了一个分享的小游戏《王者算24点》 然后开心地分享了自己340秒算10个的战绩 结果被小青瞬间KO。。她用202秒就结束了 既然作为程序员，那就用程序员的方式来继续战斗吧~ 算法研究 说到24点，无非就是4个数字之间的组合，也不知道是怎么写的，反正我最后算出来是有3888种组合方式，只要算完这...
『004』会爬取微信文章的小爬虫ヾ(•ω•`)o
maxmon
05-30 25万+
目录前言准备工作开始代码小插叙体验地址项目地址感谢 前言 老板：微信公众号要精简，把之前发的文章都删掉吧！ Maxmon：好的~ Maxmon：（万一之后文章又需要了，要是直接删了多可惜，偷偷地做个备份吧） 准备工作 看了下公众号，有直接删除文章的按钮，但好像没有保存已发布文章的地方，那怎么做存储呢？ 想来想去，就想到了爬虫~ 开始代码 const axios = requi...
『005』如何愉快地拿到CSDN的1024徽章ε=ε=ε=(~￣▽￣)~
maxmon
10-24 535
目录前言准备工作创作中感谢 前言 1024的徽章拿不拿？ 拿拿拿！！！ 准备工作 打开 CSDN官网 点击页面右上角的 写博客 创作中 感谢 CSDN
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值