![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
李沐DL代码学习记录
文章平均质量分 62
在b站学习李沐的动手学深度学习 v2 中的一些问题记录
知我昭昭
这个作者很懒,什么都没留下…
展开
-
李沐DL代码学习记录——准备知识
安装WSL扩展。原创 2024-04-11 16:25:25 · 739 阅读 · 1 评论 -
李沐DL代码学习记录——线性回归 + 基础优化算法
基础优化算法 梯度下降时,为什么减去学习率乘梯度,梯度是上升最快的方向吗 梯度确实指向损失函数增长最快的方向吗,如果是负数不是减少最快的方向吗 小批量随机梯度下降 线性回归的从零开始实现 yield关键字 返回返回一个迭代器对象 定义优化算法代码解析,即参数的更新 !!!将梯度除以批量大小是为了对梯度进行标准化,不受批量大小的影响 backward()的作用域(计算图)和torch.no_grad()的作用(节省内存和开销) 每个batch size就更新一次梯度,epoch的作原创 2024-04-13 16:59:14 · 270 阅读 · 1 评论