尝试nvidia的Tacotron-2和waveglow的结合, 并且着重考虑多GPU以及inference时的性能.

最新推荐文章于 2024-03-01 20:37:56 发布
VIP文章 最新推荐文章于 2024-03-01 20:37:56 发布
阅读量1.3k 收藏 1
点赞数
分类专栏： 研二-语音合成 研二-Maybe 文章标签： 语音合成 英伟达 Tacotron-2 GPU分布式 inference加速
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013625492/article/details/101935175
版权

https://ngc.nvidia.com/catalog/model-scripts/nvidia:tacotron_2_and_waveglow_for_pytorch

https://ngc.nvidia.com/catalog/model-scripts/nvidia:tacotron_2_and_waveglow_for_pytorch/quickStartGuide

https://www.jianshu.com/p/4905bf8e06e5

model = TheModelClass(*args, **kwargs)
 model.load_state_dict(torch.load(PATH))
 model.eval()

记住，您必须调用model.eval()，以便在运行推断之前将dropout和batch规范化层设置为评估模式。如果不这样做，将会产生不一致的推断结果。

https://github.com/NVIDIA/nvidia-docker/wiki/nvidia-docker#gpu-isolation

<
最低0.47元/天 解锁文章
ruclion
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Nvidia jetson-inference Hello AI World Networks Packages — SSD-Inception-v2.zip
05-18
Nvidia jetson-inference Hello AI World Networks Packages
基于模型与不基于模型的深度增强学习_Tacotron&Tacotron2——基于深度学习的端到端语音合成模型...
weixin_39876645的博客
10-22 133
本文未经允许禁止转载，谢谢合作。本文我将介绍当前最流行的基于深度学习的端到端语音合成模型——Tacotron及其改良版Tacotron2，Tacotron可以仅通过输入(text, wav)数据对儿来直接学习，在经过升级改良之后，最新的Tacotron2的表现已经非常接近人的自然音了；另外，比起以前繁琐的基于pipeline的语音合成模型来说，它不需要手动提取特征，也不需要细致地组合各种模块，你仅...
（初试）Tacotron2 + WaveGlow 播放英语tts
最新发布
weixin_47491668的博客
03-01 361
最近开始学nlp，打算从语音播报入手，用的自然是标题的tacotron2文字转梅尔普，然后waveglow 转音频播放出来。
Tacotron2中文训练笔记
qq_44951010的博客
05-17 2692
Tacotron2(NVIDIA版)中文训练笔记 Tacotron2项目地址：https://github.com/NVIDIA/tacotron2 Tacotron2英文训练笔记：https://blog.csdn.net/qq_44951010/article/details/124828260 从科大讯飞爬取音频数据：https://blog.csdn.net/qq_44951010/article/details/124829630 步骤 下载项目或通过git clone https://git
pytorch同时调用多块GPU
weixin_37724055的博客
10-30 2744
首先batch size要大于现有的gpu的数量。 device = torch.device("cuda:0" if torch.cuda.is_available() else "cpu")#cuda:0代表起始的； #device_id为0,如果直接是cuda,同样默认是从0开始，可以根据实际需要修改起始位置，如cuda:1 if torch.cuda.device_count() > 1: #查看当前电脑的可用的gpu的数量，若gpu数量>1,就多gpu训练 model = torc
Tacotron2语音合成
cheetah的专栏
06-12 1475
Tacotron2是由Google Brain提出来的一个语音合成框架. 模型架构： 实验环境： 在Ubuntu16.04 Ubuntu16.04 GPU GeForce RTX 2080（单个GPU） TensorFlow1.15 cuda10.0 cudnn7.6.3下完成. github上有一个Tacotron-2的Tensorflow实现，地址 https://github.com/Rayhane-mamah/Tacotron-2 用上面的开源代码跑Ljspeech数据集,tacotron_tra
NVIDIA的Tacotron2和WaveGlow端到端语音解决方案
weixin_40181747的博客
02-09 1758
语音合成Text-to-Speech 端到端的TTS解决方案，从文本到语音 两个步骤 特征预测Tacotron2 将音符/音素 转换为中间表示（梅尔频谱） 声码器WaveGlow 将中间表示（梅尔频谱）转换为人能听到的声波 声码器 WaveGlow采用对抗生成网络（GAN），变分自编码器（VAE）以及基于流的方法（Flow-Based） ...
模型推理: Tacotron2语音合成
shengyin714959的博客
07-27 230
寒武纪软硬件平台介绍硬件：寒武纪 MLU370 AI 加速卡框架：Pytorch 1.6系统环境：寒武纪云平台。
tacotron-2 安装及使用笔记
I think，therefore i am
12-08 2230
安装Ｔensorflow 版本及对应的CUDN. https://tensorflow.google.cn/install/source CUDA安装 CUDA下载链接 下载文件示例格式 cuda_10.0.130_410.48_linux.run 使用命令 sh cuda_10.0.130_410.48_linux.run来安装此文件 按照提示一步一步走 安装完成后用命令检查是否安装成功 cat /usr/local/cuda/version.txt 即可查看cuda版本 或者是输入...
Nvidia硬解码总结
weixin_33775572的博客
07-14 5018
2019独角兽企业重金招聘Python工程师标准>>> ...
tacotron2:基于Tacotron 2和Waveglow的多扬声器和情感TTS
05-16
基于Tacotron 2和Waveglow的多扬声器和情感TTS 目录 运行TensorBoard 推理 参数 共享参数 共享的音频/ STFT参数 WaveGlow参数 Tacotron参数 贡献 一般说明 此存储库包含Tacotron 2，带有多扬声器，情感嵌入的WaveGlow的示例代码以及用于数据预处理的脚本。 检查点和代码来自以下来源： 英伟达深度学习实例 英伟达Tacotron 2 Nvidia WaveGlow 火炬轮毂WaveGlow 火炬轮毂Tacotron 2 完毕： 从上述5个来源中获取了所有最好的代码部分 清理代码并修复一些错误 更改代码结构 添加多说话者和情感参与者 添加预处理 将命令行args中的所有配置移到configs/experiments文件夹下的实验配置文件中 添加恢复/检查点机制 添加张量板 使解码器以每步n> 1帧
论文阅读 WAVEGLOW
01-06
WAVEGLOW摘要1 引言2 WAVEGLOW2.1 放射耦合层2.2 1*1可逆卷积2.3 早期产出2.4 推论3 实验记录 摘要 在本文提出了WaveGlow:一种依靠流的从梅尔频谱图合成高质量语音的网络。它结合了Glow和WaveNet，生成的快、好、高质量的韵律，而且还不需要自动回归。实现也只是一个单网络，仅使用单个成本函数进行训练：最大化训练数据的可能性，这使训练过程简单且稳定。我们的用了PyTorch实现，结果也蛮好的，和最佳公开的WaveNet效果相同。 1 引言 随着与机器的语音交互变得越来越有用，有效合成高质量语音变得越来越重要。语音质量或延迟的微小变化会对客户体验和客户偏
Python-WaveGlow基于流的语音合成生成网络
08-09
A Flow-based Generative Network for Speech Synthesis
Tacotron2源码
10-11
tacotron2源码，文本转语音，很好的资源，调试通过可用
Nvidia jetson-inference Hello AI World Networks — DetectNet-COCO-Chair.zip
05-18
Nvidia jetson-inference Hello AI World Networks Packages
Nvidia jetson-inference Hello AI World Networks — DetectNet-COCO-Dog.zip
05-18
Nvidia jetson-inference Hello AI World Networks Packages
Nvidia jetson-inference Hello AI World Networks Packages — SSD-Mobilenet-v2.zip
05-18
Nvidia jetson-inference Hello AI World Networks Packages
Nvidia jetson-inference Hello AI World Networks Packages — VGG-19.z01（part2）
05-18
Nvidia jetson-inference Hello AI World Networks Packages, 因csdn限制上传大小，故分为2个包，两个包一起下载才能解压，两个包一起下载才能解压两个包一起下载才能解压。（重要的事情说3遍）
python -X utf8 tools/diffusion/inference.py --config
06-11
这是一个运行 Python 程序 `inference.py` 的命令，使用了 Python 的 `-X utf8` 参数来指定编码为 UTF-8。`inference.py` 程序位于 `tools/diffusion` 目录下，使用了 `--config` 参数来指定配置文件。 具体来说，`...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值