![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
深度学习
文章平均质量分 93
澪mio
我不是二刺猿
展开
-
深度学习入门(三十)卷积神经网络——NiN
课件网络中的网络NiN全连接层的问题NiN块NiN架构NiN Networks总结教材1 NiN块2 NiN模型3 训练模型4 小结参考文献原创 2022-11-09 15:31:23 · 779 阅读 · 0 评论 -
深度学习论文笔记(一)Deep Residual Learning for Image Recognition
ResNet1 Summary总结遇到的问题?解决方案?成果?2 Introduction神经网络叠的越深,则学习出的效果就一定会越好吗?深度残差学习 Deep Residual Learning相关工作Related Work3 Deep Residual Learning3.1 残差学习Residual Learning3.2 Identity Mapping by Shortcuts3.3 网络架构Network Architectures3.4 网络架构Network Ar原创 2022-11-09 09:17:41 · 719 阅读 · 1 评论 -
深度学习入门(二十九)卷积神经网络——VGG
课件VGGVGG块VGG架构进度总结教材1 VGG块2 VGG网络3 训练模型4 小结原创 2022-11-09 08:48:16 · 5206 阅读 · 0 评论 -
深度学习入门(二十八)卷积神经网络——AlexNet
课件以前的机器学习几何学特征工程HardWareImageNet(2010)AlexNetAlexNet架构更多细节复杂度总结教材1 学习表征1.1 缺少的成分:数据1.2 缺少的成分:硬件2 AlexNet2.1 模型设计2.2 激活函数2.3 容量控制和预处理3 读取数据集4 训练AlexNet5 小结参考文献原创 2022-11-08 21:12:37 · 1544 阅读 · 0 评论 -
深度学习入门(二十七)卷积神经网络——LeNet
课件手写的数字识别MNIST总结教材1 LeNet2 模型训练3 小结参考文献原创 2022-11-08 19:14:32 · 823 阅读 · 0 评论 -
深度学习入门(二十六)卷积神经网络——池化层
课件池化层二维最大池化填充、步幅和多个通道平均池化层总结教材1 最大池化层和平均池化层2 填充和步幅3 多个通道4 小结原创 2022-11-07 18:18:06 · 1059 阅读 · 0 评论 -
深度学习入门(二十五)卷积神经网络——多输入多输出通道
课件多个输入通道多个输出通道多个输入和输出通道1×1卷积层二维卷积层总结教材1 多输入通道2 多输出通道3 1×1卷积层4 小结原创 2022-11-07 18:09:17 · 2239 阅读 · 0 评论 -
深度学习入门(二十四)卷积神经网络——填充和步幅
课件填充步幅总结课本1 填充2 步幅3 小结原创 2022-11-05 10:10:10 · 2229 阅读 · 1 评论 -
深度学习入门(二十三)卷积神经网络——图像卷积
课件卷积层二维交叉相关二维卷积层例子交叉相关VS卷积一维和三维交叉相关总结教材1 互相关运算2 卷积层3 图像中目标的边缘检测4 学习卷积核5 互相关和卷积6 特征映射和感受野7 小结原创 2022-11-04 10:58:30 · 926 阅读 · 1 评论 -
深度学习入门(二十二)卷积神经网络——从全连接层到卷积
课件分类猫和狗的图片回归:单隐藏层MLP两个原则重新考察全连接层原则1——平移不变性原则2——局部性总结教材1 不变性2 多层感知机的限制2.1 平移不变性2.2 局部性3 卷积4 “沃尔多在哪里”回顾4.1 通道5 小结原创 2022-11-04 10:43:32 · 447 阅读 · 0 评论 -
深度学习入门(二十一)深度学习计算——GPU
1 计算设备2 张量与GPU2.1 存储在GPU上2.2 复制2.3 注意3 神经网络与GPU4 小结原创 2022-11-03 13:13:00 · 685 阅读 · 0 评论 -
深度学习入门(二十)深度学习计算——读写文件
1 加载和保存张量2 加载和保存模型参数3 小结原创 2022-11-03 13:03:07 · 342 阅读 · 0 评论 -
深度学习入门(十九)深度学习计算——自定义层
1 不带参数的层2 带参数的层3 小结原创 2022-11-03 12:53:07 · 282 阅读 · 0 评论 -
深度学习入门(十八)深度学习计算——参数管理
1 参数访问1.1 目标参数1.2 一次性访问所有参数1.3 从嵌套块收集参数2 参数初始化2.1 内置初始化2.2 自定义初始化3 参数绑定原创 2022-11-03 12:43:34 · 638 阅读 · 0 评论 -
深度学习入门(十七)深度学习计算——层和块
1 自定义块2 顺序块3 在前向传播函数中执行代码4 效率5 小结原创 2022-11-03 10:51:27 · 185 阅读 · 0 评论 -
深度学习入门(十六)实战Kaggle比赛:预测房价
1 下载和缓存数据集2 Kaggle3 访问和读取数据集4 数据预处理5 训练6 K折交叉验证7 模型选择8 提交你的Kaggle预测9 小结原创 2022-11-02 19:51:22 · 1053 阅读 · 0 评论 -
深度学习入门(十五)环境和分布偏移(了解)
环境和分布偏移教材分布偏移的类型协变量偏移标签偏移概念偏移分布偏移示例医学诊断自动驾驶汽车非平稳分布更多轶事分布偏移纠正经验风险与实际风险协变量偏移纠正标签偏移纠正概念偏移纠正学习问题的分类法批量学习在线学习老虎机控制强化学习考虑到环境机器学习中的公平、责任和透明度原创 2022-11-02 18:59:36 · 2562 阅读 · 0 评论 -
深度学习入门(十四)数值稳定性和模型初始化
数值稳定性和模型初始化课件教材梯度消失和梯度爆炸梯度消失梯度爆炸打破对称性参数初始化默认初始化Xavier初始化额外阅读小结原创 2022-11-01 18:08:27 · 1069 阅读 · 0 评论 -
深度学习入门(十三)前向传播、反向传播和计算图
前向传播、反向传播和计算图教材前向传播前向传播计算图反向传播训练神经网络小结原创 2022-11-01 17:48:37 · 764 阅读 · 0 评论 -
深度学习入门(十二)drop out 丢弃法
drop out 丢弃法课件动机无偏差的加入噪音使用丢弃法推理中的丢弃法总结教材重新审视过拟合扰动的稳健性实践中的暂退法方法代码实现(从零开始)1 定义模型参数2 定义模型3 训练和测试代码实现(简洁实现)小结原创 2022-10-31 20:53:56 · 1938 阅读 · 0 评论 -
深度学习入门(十一)权重衰减
权重衰退使用均方范数作为硬性限制(不常用)使用均方范数作为柔性限制演示对最优解的影响参数更新法则总结代码演示(从零实现)1 初始化模型参数2 定义L2范数惩罚3 定义训练代码实现4 忽略正则化直接训练5 使用权重衰减代码演示(简洁实现)小结原创 2022-10-31 19:54:24 · 906 阅读 · 0 评论 -
深度学习中端到端(end-to-end)简要理解
端到端 end-to-end原创 2022-10-30 21:42:23 · 11771 阅读 · 5 评论 -
深度学习入门(九) 多层感知机实现
多层感知机实现原创 2022-10-28 15:15:21 · 1251 阅读 · 0 评论 -
深度学习入门(十) 模型选择、过拟合和欠拟合
前言模型选择例子:预测谁会偿还贷款?训练误差和泛化误差验证数据集和测试数据集K-则交叉验证总结过拟合和欠拟合模型容量模型容量的影响估计模型容量VC维线性分类器的VC维VC维的用处数据复杂度总结代码展示原创 2022-10-28 11:11:10 · 987 阅读 · 0 评论 -
深度学习入门(八) 多层感知机
前言感知机训练感知机收敛定理XOR问题总结多层感知机学习XOR单隐藏层单分类sigmoid激活函数Tanh激活函数ReLU激活函数多类分类多隐藏层总结原创 2022-10-28 09:55:30 · 830 阅读 · 0 评论 -
深度学习入门(六) 图像分类数据集(MNIST)
图像分类数据集(Fashion-MNIST)1 获取数据集2 读取小批量3 整合所有组件原创 2022-10-25 15:10:47 · 2669 阅读 · 0 评论 -
深度学习入门(五) softmax回归
前言引言回归VS分类从回归到多类分类均方损失无校验比例校验比例softmax和交叉熵损失总结损失函数L2 lossL1 lossHuber's Robust Losssoftmax回归分类问题softmax回归模型单样本分类的矢量计算表达式小批量样本分类的矢量计算表达式交叉熵损失函数模型预测及评价小结原创 2022-10-25 14:02:47 · 1160 阅读 · 0 评论 -
深度学习入门(四) 线性回归实现
线性回归实现1 线性回归的从零实现1.1 生成数据集1.2 读取数据集1.3 初始化模型参数1.4 定义模型1.5 定义损失函数1.6 定义优化算法1.7 训练2 线性回归的简洁实现2.1 生成数据集2.2 读取数据122.3 定义模型2.4 初始化模型参数2.5 定义损失函数2.6 定义优化算法2.7 训练模型小结原创 2022-10-22 21:49:54 · 1086 阅读 · 1 评论 -
深度学习入门(三) 线性回归简介
线性回归(linear regression)1 线性回归的基本要素1.1 模型定义1.2 模型训练1.3 模型预测2 线性回归的表示方法2.1 神经网络图2.2 矢量计算表达式3 实例原创 2022-10-22 21:10:26 · 762 阅读 · 0 评论 -
深度学习入门(二) 环境配置与预备知识
深度学习入门(二) 预备知识与准备前言环境配置与预备知识一 环境配置AnacondaJupyterPyTorch其他二 数据操作2.1 创建Tensor2.2 操作算术操作索引改变形状线性代数2.3 广播机制2.4 运算的内存开销2.5 Tensor和NumPy相互转换NumPy数组转Tensor2.6 Tensor on GPU三 自动求梯度3.1 概念3.2 Tensor3.3 梯度四 数据预处理4.1 读取数据集4.2 处理缺失值4.3 转换为张量原创 2022-10-22 15:08:45 · 1197 阅读 · 0 评论 -
深度学习入门(一) 深度学习简介
深度学习简介原创 2022-10-21 14:17:16 · 1520 阅读 · 0 评论