阅读论文——AudioLDM: Text-to-Audio Generation with Latent Diffusion Models使用潜在扩散的文本到音频的生成模型

阅读论文——AudioLDM: Text-to-Audio Generation with Latent Diffusion Models使用潜在扩散的文本到音频的生成模型

学习链接:https://ai-scholar.tech/zh/articles/diffusion-model/audioldm

介绍:AudioLDM利用用于生成高质量图像的潜在扩散模型(LDM)生成具有连续潜在表征的语音。具体来说,它将基于Mel频谱的变异自动编码器(VAE)与基于对比语言-音频预训练(CLAP)的嵌入条件相结合,实现了高级文本条件下的语音生成
项目官方网站:https://ai-scholar.tech/zh/articles/diffusion-model/audioldm
此外,训练有素的AudioLDM可用于执行以下语音操作,无需微调。

  • 语音风格转换
  • 超分辨率(如视频)
  • 油画

未完待续。。。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值