语音合成论文优选：BVAE-TTS BVAE for Non-Autoregressive TTS

声明：语音合成论文优选系列主要分享论文，分享论文不做直接翻译，所写的内容主要是我对论文内容的概括和个人看法。如有转载，请标注来源。

欢迎关注微信公众号：低调奋进

Bidirectional Variational Inference for Non-Autoregressive Text-to-Speech

本文是ICLR 2021的文章，目前看到的文章版本为匿名，主要研究使用BVAE构建non-autoregressive TTS，使推理速度比现有的自回归和非自回归速度都快许多（比tacotron2增加27倍），文章链接

https://openreview.net/pdf?id=o3iritJHLfO

1 研究背景

现有的自回归系统的缺点是推理无法并行，因此时间开销与帧数呈线性关系，而且缺乏对齐鲁棒性。目前非自回归系统则需要teacher模型来引导duration训练或者需要teacher模型来引导特征学习，而且一些flow基础的模型较大，而本文提出的非自回归模型不需要teacher模型，同时更加灵活。实验结果显示，BVAE-TTS的推理速度是tacotron2的27倍，是Glow-TTS的两倍，但合成的音频质量好于Glow-TTS。

2 详细设计

先看一下BVAE(bidirectional inference variational autoencoder)的结构为图1所示，主要分为bottom-up和Top-