动手学深度学习----学习笔记
文章平均质量分 90
本模块重要讲解概念与代码均出自李沐老师的《动手学深度学习》,如有不解请评论留言或者阅读原著
Gaolw1102
这个作者很懒,什么都没留下…
展开
-
预训练word2vec--Word2Vec实现(二)
中心词与上下文词的点积意义,二元交叉熵损失,余弦相似度,实现word2vec词嵌入模型原创 2022-11-08 17:45:00 · 1362 阅读 · 0 评论 -
词嵌入数据集的预处理--Word2Vec实现(一)
下采样、提取中心词和上下文词,负采样的方法实现word2vec的Skip-Gram跳元模型,本小节处理预训练数据。原创 2022-11-08 10:53:33 · 1448 阅读 · 0 评论 -
梯度下降法的灵魂思想
梯度下降算法的核心思想,实现与版本对比原创 2022-11-07 09:58:14 · 313 阅读 · 1 评论 -
Transformer - 基础分析与实现
从零开始分析和实现transformer模型原创 2022-11-03 09:15:00 · 2004 阅读 · 0 评论 -
Multihead Attention - 多头注意力
多头注意力的基本概念及实现原创 2022-11-02 10:50:43 · 6799 阅读 · 0 评论 -
Bahdanau 注意力(具备注意力机制的Encoder-Decoder模型)
Seq2Seq机器翻译模型,具备加性注意力机制的Encoder-Decoder模型原创 2022-10-28 18:15:00 · 1878 阅读 · 0 评论 -
Seq2Seq - 序列到序列的学习(RNN循环神经网络)
Seq2Seq,编码器与解码器、掩蔽交叉熵损失函数、机器翻译的应用、BLEU评价指标原创 2022-10-28 08:45:00 · 901 阅读 · 0 评论 -
注意力评分函数 - Attention Scoring Function
掩蔽softmax操作算法实现,两个注意力评分函数:加性注意力评分函数和缩放点积注意力评分函数。原创 2022-10-27 21:15:00 · 593 阅读 · 0 评论 -
注意力汇聚:Nadaraya-Watson 核回归
Nadaraya-Watson 核回归,非参数注意力汇聚与带参数注意力汇聚,小批量矩阵乘法原创 2022-10-27 07:45:00 · 607 阅读 · 0 评论 -
Attention Prompt - 注意力提示
注意力的一些基本概念原创 2022-10-26 20:26:02 · 1305 阅读 · 0 评论 -
Encoder-Decoder -编码器解码器架构(RNN循环神经网络)
编码器-解码器概要原创 2022-10-25 18:00:00 · 6780 阅读 · 0 评论 -
Machine Translation and Datasets - 机器翻译与数据集(RNN循环神经网络)
机器翻译的数据的预处理操作,包含序列填充裁剪、批量处理等原创 2022-10-24 20:17:03 · 503 阅读 · 0 评论 -
使用 RNN 模型从零实现 情感分类(详解)
使用RNN模型实现情感分类,详解实现过程原创 2022-10-21 13:41:06 · 4958 阅读 · 25 评论 -
Deep-RNN-深度循环神经网络(RNN循环神经网络)
Deep-RNN-深度循环神经网络的概念学习与应用原创 2022-10-20 07:45:00 · 1311 阅读 · 0 评论 -
LSTM -长短期记忆网络(RNN循环神经网络)
LSTM长短期记忆网络的基本概念与实现原创 2022-10-19 08:10:01 · 4746 阅读 · 3 评论 -
初始GRU - 门控循环单元(RNN循环神经网络)
重置门、更新门、GRU门控循环单元的实现原创 2022-10-18 09:45:00 · 1272 阅读 · 0 评论 -
Recurrent Neural Network(Concise) - 简洁实现循环神经网络(RNN循环神经网络)
简洁实现RNN循环神经网络,包含循环层、输出层等,句子自动补全原创 2022-10-17 19:30:00 · 463 阅读 · 1 评论 -
Recurrent Neural Network - 从零开始实现循环神经网络(RNN循环神经网络)
从零开始实现一个RNN循环神经网络原创 2022-10-17 08:18:41 · 1660 阅读 · 0 评论 -
Language Models and Datasets - 语言模型与数据集(RNN循环神经网络)
RNN模型语言模型与数据集,构建词表、语料,随机采样和顺序采样原创 2022-10-16 22:45:00 · 615 阅读 · 0 评论 -
Text Preprocessing - 文本预处理(RNN循环神经网络)
Text-Preprocessing文本预处理,词元、词表、词料库等原创 2022-10-16 10:45:00 · 836 阅读 · 0 评论 -
Sequential Model - 序列模型(RNN循环神经网络)
Sequential Model - 序列模型(RNN循环神经网络)的理解与实践。原创 2022-10-15 21:45:00 · 2261 阅读 · 0 评论 -
DenseNet - 稠密神经网络(CNN卷积神经网络)
DenseNet稠密神经网络、稠密层与过渡层原创 2022-10-15 07:45:00 · 2167 阅读 · 0 评论 -
ResNet - 残差神经网络(CNN卷积神经网络)
Residual块、ResNet残差网络的理解与实现原创 2022-10-14 21:15:00 · 8200 阅读 · 0 评论 -
Batch Normal - 批量规范化(CNN卷积神经网络)
BatchNorm、批量数据规范化原创 2022-10-14 08:45:00 · 1618 阅读 · 0 评论 -
GoogLeNet-并行连接的网络(CNN卷积神经网络)
GoogLeNet并行连接网络、CNN卷积神经网络原创 2022-10-13 09:15:00 · 1367 阅读 · 0 评论 -
NiN-网络中的网络(CNN卷积神经网络)
NiN块,NiN卷积神经网络原创 2022-10-12 22:15:00 · 526 阅读 · 0 评论 -
VGG-块网络(CNN卷积神经网络)
VGG块、VGG-11网络原创 2022-10-12 07:30:00 · 847 阅读 · 0 评论 -
如何免费使用GPU进行加速?(两种方法)
深度学习,免费GPU使用,Kaggle,Google Colab原创 2022-10-10 12:33:16 · 5730 阅读 · 2 评论 -
AlexNet-深度卷积神经网络(CNN卷积神经网络)
AlexNet深度卷积神经网络原创 2022-10-11 18:30:00 · 5632 阅读 · 1 评论 -
从零实现Lenet-初级卷积神经网络(CNN卷积神经网络)
从零实现初级LeNet卷积神经网络,并应用Fashion-MNIST数据集评估模型原创 2022-10-10 19:15:00 · 488 阅读 · 0 评论 -
池化层-Pooling(CNN卷积神经网络)
卷积神经网络中的池化(Pooling)操作,最大池化层与平均池化层原创 2022-10-10 08:45:00 · 3175 阅读 · 2 评论 -
多输入多输出通道(CNN卷积神经网络)
卷积神经网络的多输入与多输出、1*1卷积核介绍原创 2022-10-07 15:08:53 · 5975 阅读 · 0 评论 -
填充与步幅(CNN卷积神经网络)
填充(Padding)与步幅(Stride)的基本概念与相关运算原创 2022-10-05 21:51:41 · 2595 阅读 · 0 评论 -
卷积运算(CNN卷积神经网络)
卷积(互相关)运算、边缘检测、卷积层原创 2022-10-04 22:23:03 · 2842 阅读 · 0 评论 -
参数管理(深度学习计算)
深度学习的计算原创 2022-10-04 17:02:52 · 231 阅读 · 0 评论 -
层和块(深度学习计算)
神经网络的顺序嵌套与连接结合原创 2022-10-03 11:19:41 · 401 阅读 · 0 评论 -
实战Kaggle比赛----预测房价(多层感知机)
实战Kaggle比赛----预测房价,数据预处理,K折交叉验证,Adam优化算法原创 2022-10-01 13:31:40 · 1949 阅读 · 0 评论 -
暂退法dropout----详解与分析(多层感知机)
神经网络隐藏层隐单元的部分消除,模型复杂度的稳定平衡原创 2022-09-29 22:06:55 · 2465 阅读 · 1 评论 -
权重衰减----添加正则化(多层感知机)
模型权重的衰减,控制模型复杂度,添加正则化的操作原创 2022-09-29 08:32:55 · 899 阅读 · 0 评论 -
模型选择、过拟合与欠拟合(多层感知机)
欠拟合、过拟合的多项式分析原创 2022-09-28 18:52:05 · 707 阅读 · 0 评论