- 博客(1)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 深度学习浅析
目录 一、第一阶段 1.1、MP模型 1.2、感知机 二、第二阶段 2.1、多层感知机(DNN) 2.2、BP神经网络 2.3、卷积神经网络（CNN） 2.4、循环神经网络（RNN） 2.5、长短时记忆网络（LSTM） 三、第三阶段 3.1、Hopfield网络 3.2、玻尔兹曼机 3.3、受限玻尔兹曼机 深度学习是基于神经网络发展起来的技术，而神经网络的发展具有...
2019-03-12 16:14:41
445
Attention Is All You Need论文
"Attention Is All You Need" 论文的详细解读如下：
1. 摘要（Abstract）：
论文摘要简要介绍了Transformer模型，一种基于注意力机制的序列到序列学习模型。摘要提到，Transformer摒弃了传统的循环和卷积层，完全依赖于注意力机制来实现输入和输出序列之间的关联。实验结果表明，在翻译质量、并行能力和所需训练时间方面，Transformer优于此前的方法。
2. 引言（Introduction）：
引言部分首先回顾了传统的序列到序列模型，特别是基于RNN和CNN的模型，并指出了它们在处理长距离依赖和并行计算方面的局限性。随后，作者介绍了注意力机制，并强调了其在机器翻译等任务中的重要性。最后，作者总结了Transformer模型的主要特点和实验结果，指出其在翻译质量和模型效率方面的优势。
3. 相关工作（Background）：
在这一部分，作者简要回顾了与Transformer模型相关的先前工作，包括传统的序列到序列模型、基于注意力机制的模型以及一些优化技术。这些工作为Transformer模型的设计提供了理论基础和实践经验。
2024-07-04
diabetes_train.txt
糖尿病数据集，主要用于机器学习或者深度学习分类算法，共有9个字段
前8个维变量，最后一个字段为标签，为二分类数据集，当然自己可以转换成ONE-HOT类型
2020-05-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人