Tacotron2讲解

10 篇文章 0 订阅
4 篇文章 0 订阅

参考博客:
https://blog.csdn.net/whjkm/article/details/89321954#commentBox
https://blog.csdn.net/yunnangf/article/details/79585089

github代码:
https://github.com/NVIDIA/tacotron2

一、模型结构
模型结构上,tacotron2tacotron基本类似,除了CBHG结构和Griffin结构上略有区别
Tacotron:
在这里插入图片描述
Tacotron2:
在这里插入图片描述
在这里插入图片描述
上图来自: https://blog.csdn.net/whjkm/article/details/89321954#commentBox

二、重点区别:
1、encoder部分,使用了embedding + 3Conv_layers + Bi-directional_LSTM
2、attention使用的是location sensitive attention,可参考:https://www.cnblogs.com/mengnan/p/9527797.html
3、Pre_netdropout是一直设置为 true 的(据说是根据实验效果),post_net中最后一层一般为linear激活函数
4、最后的 mel_output_post 是经过 post_netlinear_projection相加得到
5、多帧预测方面,虽然Tacotron2没有使用多帧,但是实现原理类似

三、代码部分
此博客已经讲的比较详细,建议使用上面的模型结构图,理清模型结构,再细读代码。https://blog.csdn.net/whjkm/article/details/89321954#commentBox

  • 1
    点赞
  • 25
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值