Transformer详解(资源整合 Transformer is All Your Need)

序列模型和Attention解读(图解Attention):

Jay Alammar: Mechanics of Seq2seq Models With Attentionicon-default.png?t=M4ADhttps://jalammar.github.io/visualizing-neural-machine-translation-mechanics-of-seq2seq-models-with-attention/

最详细的transformer解读(图解transformer):

Jay Alammar: The illustrated Transformericon-default.png?t=M4ADhttps://jalammar.github.io/illustrated-transformer/

哈佛大学编写的极为详细的注解Attention is All You Need,其中使用代码实现了Transformer的每一个关键步骤,值得细品:

Harvard: The Annotated Transformericon-default.png?t=M4ADhttp://nlp.seas.harvard.edu/2018/04/03/attention.html

有大神提供了中文的版本,膜拜!

Transformer的pytorch实现细节解析icon-default.png?t=M4ADhttps://zhuanlan.zhihu.com/p/48731949

最后附上Transformer的pytorch接口定义,开搞!

TRANSFORMER APIicon-default.png?t=M4ADhttps://pytorch.org/docs/stable/generated/torch.nn.Transformer.html#torch.nn.Transformer

 

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值