Facebook开发深度学习系统,如同大师一样玩音乐

内容来源:ATYUN AI平台 

Facebook开发深度学习系统,如同大师一样玩音乐

Facebook的研究人员开发了一种深度学习系统,可以复制它听到的音乐,将其回放,就好像它是莫扎特,贝多芬或巴赫一样。这是研究人员首次在乐器,风格和流派之间制作高保真音乐转换。

“人类一直创造音乐并复制它,无论是通过唱歌,吹口哨,拍手,还是在经过一些训练之后即兴演奏或进行标准乐器演奏。这种能力并非人类专有,还有许多其他声乐模仿物种能够通过听觉重复音乐,”研究人员在报告中写道。

研究者使用八个NVIDIA Tesla V100 GPU和cuDNN -accelerated PyTorch深度学习框架,六类古典音乐领域训练系统,其中包括:莫扎特的46部交响曲,海顿的27个弦乐四重奏,JS巴赫的清唱剧为乐队,巴赫的管风琴作品,贝多芬的32首钢琴奏鸣曲,以及巴赫的键盘作品。训练耗时8天,包括数千个来自各个领域的样本。

该方法基于一个多域WaveNet自动编码器,NVIDIA在上个月写道。研究人员指出,与领域无关的编码器可以让他们甚至从训练期间不会涉及到的音乐领域进行转换。

研究人员表示:“我们稍微修改了WaveNet方程,以使它们的架构适合NVIDIA提供的推理时所用的CUDA内核。”训练中使用的相同的GPU也用于推断。

精彩视频点击链接:Facebook开发深度学习系统,如同大师一样玩音乐

“据我们所知,结果表现出的能力是前所未有的。虽然将一种乐器转换为另一种乐器时,我们的系统比专业音乐家的表现要差或略差。很多时候,它很难分辨出哪个是原始音频文件,哪个是模拟完全不同乐器的转换输出,”研究人员表示。

该团队表示,他们的工作可能会开展其他高级任务,如音乐的转录和音乐的自动组合。

研究人员补充道,“我们的网络能够成功处理未经训练过的乐器或口哨等其他来源。在输出端,生成相对高质量的音频,并且可以添加新的仪器,而无需重新训练整个网络。”

本文转自ATYUN人工智能媒体平台,原文链接:Facebook开发深度学习系统,如同大师一样玩音乐

更多推荐

DataRobot和葡萄酒项目:数据科学的优雅融合

将拟人推理引入无人驾驶汽车导航中

PROPHESEE 在2019年嵌入式视觉峰会

欢迎关注ATYUN官方公众号,商务合作及内容投稿请联系邮箱:bd@atyun.com
欢迎关注ATYUN官方公众号,商务合作及内容投稿请联系邮箱:bd@atyun.com

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值