利用循环神经网络生成唐诗_华为发布全球首个为唐诗编曲的AI,一键唱响1300年前大唐盛世...

cabed05061054bb1532d2b84fec07270.png

AI下一个能与人类“一比高下”的领域在哪里?

作者 | 奇点

编辑 | WW

公众号 | AI星球

当AlphaGo2016年击败了韩国围棋九段的李世石,新一代“AlphaGo Zero”又在年初《星际争霸2》比赛中以5:2优秀战绩战胜了职业电竞选手,AI在围棋、电竞界可谓“所向披靡”。

试问:AI下一个能与人类“一比高下”的领域在哪里?没错,是音乐。

诗歌文化博大精深,常以文字为载体,为后人传颂千年。但很少有人知道,古代的诗词是唱出来的。近日,华为就在其官方公众号上发布了用AI识别古乐谱为唐诗编曲的最新进展。

三分多钟的短视频里详细的介绍了华为手机Mate 20 Pro在内置麒麟980芯片双核NPU的支撑下,AI是如何重构唐诗曲调的。

ef23bdc56c0eb3858f86670416c43648.png

视频中,研究人员对着华为Mate 20 Pro朗读《春江花月夜》全诗,AI则借助着手机内置的语音智能识别,便可以判断诗词的语境和情绪。

再加以华为Mate 20 Pro手机内置麒麟980芯片强大的AI算力,从而完成深度神经网络推理算法,使得AI可以把诗歌中每个字句的意境和数据库中的古乐音符进行匹配,最终重构一首唐诗曲调。

1300年前的乐曲,就借由AI算法被重现了。那么,AI是如何实现重构唐曲的。

一开始,研究人员尝试利用AI从当下留存不多的唐诗减字谱中,找回古乐编曲的规律。这上面记载着古琴的指法、弦序和音位。

然后,将古谱的规律编写成程序,用华为Mate 20 Pro手机拍下馆藏的古谱,将其内容翻译成现代简谱、收录到数据库中,在此同时他们会开启云计算,让数据同步到云上(即服务器)。

接下来,研究人员会在服务器上训练神经网络模型,让AI进行古谱的深度学习,使得AI具备能力去识别出古乐谱的音高规律。

4b4e7df38cba5beef8040b0443867a74.png

这样,AI就掌握了古乐编曲的能力。之后,再将训练后的AI模型迁移至华为Mate 20 Pro上。

之后,就该华为手机中内置的麒麟980芯片“大显身手”了——麒麟980芯片能够让手机有足够的算力支撑其在端侧运算,从而将一键生成古曲。

于是,1300多年前的唐诗乐曲就能瞬间回荡在我们耳边。

ce553ae1390a7ed679c0bae04e41330d.gif

揭谜麒麟980芯片的AI心脏——NPU

这款AI芯片麒麟980之所以具备如此高的算力,是因为在它的左心房上“跳动”着一颗AI心脏——内置双核NPU。

2017年10月,华为正式发布了麒麟970——全球首款内置NPU的人工智能处理器。此后,“NPU”这个词便以“高大上”的形象深入人心。但NPU主要起到什么作用?它到底厉害在哪里呢?

NPU(神经网络处理器,Neural-network Processing Unit)是AI芯片中内置的一颗神经网络单元,它的运算结构模仿了人类生物神经细胞的运作模式,而且,相较于传统的CPU和GPU,能够更迅速的对外界信号做出反应。

根据测试发现,基于NPU对图像识别处理、自然语言理解处理速度比CPU快了25,能耗则可以降低50倍,它的AI计算能力超强,具体可以达到1.92万亿次/OPS(operations per second/每秒操作数)。

而在华为去年发布的麒麟980中,其内置的双核NPU则更强悍。在麒麟970的算力之上又进行了升级,AI的算力达到了上一代的2倍(约3.84万亿次 /OPS)。

借由AI的算法和强悍的算力,华为Mata 20 Pro实现了AI重构唐曲,也是情理之中。

其实,早在华为为我们重构唐曲前,AI就已经近进军音乐界多年。

ce553ae1390a7ed679c0bae04e41330d.gif

AI作曲:巨头公司“各显神通”

  • OpenAI的MuseNet

2015年埃隆·马斯克创立OpenAI,希望OpenAI能在推动人工智能上发挥积极作用。

2018年,OpenAI组建的电竞战队OpenAI Five在《Dota 2》比赛中全胜归来之后。

今年4月,OpenAI发布了深度神经网络—MuseNet,它可以使用 10 种不同乐器、以及风格如乡村乐、莫扎特、披头士乐队等,制作出长达4分钟的音乐作品

11dbabf5eaab7210ec086879d7e5542e.png

OpenAI在博客中表示,MuseNet 并不是像人类一样通过对音乐的理解来进行编程,而是学习预测 token 来学习和声、节奏、风格的模式。

它会从许多来源收集 MuseNet 的训练数据,像是 BitMidi 网站上的文件、MAESTRO 的数据集等。当MuseNet 吸收了比如流行、爵士等多种音乐风格后,就能混合生成新的音乐。

b9fd2d66e0ac4c3c597c496af70ca552.png

MuseNet看似完美,但实际也有不小的缺陷,OpenAI 研究人员 Christine Payne 表示,MuseNet目前仍有局限性,因为它是通过计算所有可能的音符和乐器的概率来产生每个音符,所以偶尔也会有不和谐的选择,会出现奇怪的配对。

但无论如何,OpenAI的音乐探索之路还在继续着。

  • 谷歌的Magenta和Song Maker

Magenta 是谷歌大脑的一个致力于用机器学习创造引人入胜的音乐和艺术的项目,其目标是利用机器学习开发人类表达的新途径。

2017年,该项目的研究小组推出了一个名为 NSynth Super(Neural Synthesizer)的神经网络合成器,使用深度神经网络在单个样本的水平上合成声音。

91a92782a5b0a3511cddcf02d3fae5f1.png

有趣的是,谷歌将这个声音合成器做成了一个浏览器可玩的神经网络音频合成器。

在主界面上,我们就可以对其进行直接操作,点击红蓝按钮来选择你中意的音色,加以滚动条进行你个人专属音色的设计,然后在通过一个虚拟的键盘上,我们就可以即兴创作了。

dc07008a19c038401c6bb02b3c5783f8.png

谷歌团队也表示说:“Magenta的目标不仅仅是开发新生成算法,而是关闭人类创作中‘创意循环’,我们不是用AI代替人类的创造力,而是努力让工具更深入地理解音乐,让它们更直观、更有启发性。

很快,第二年就推出了新的产品——Song Maker。

d9d290d291ede1e9e6e7a40c61e6909b.png

2018年3月初,谷歌开源音乐教育平台Chrome Music Lab上线了一款全新的免费音乐创作工具Song Maker。

这款产品正如它的名字——音乐创作人,最大的特点就是它可以基于用户的选择对音符范围进行限制,即使是没有音乐基础的人也可以创作出动听的音乐。

9ba7ae5093b786fc62677f76216c92e5.png

这个音乐创作工具是基于谷歌浏览器,而且它的操作也很简单,上手非常容易,谷歌想要通过可视化的方法,真正的帮助人类理解音乐。

Song Maker音乐创作工具整体上来讲,是由两部分的音序器构成,大的用来控制旋律,最下面的小格子则用来控制节奏。使用者可通过配合鼠标、键盘来操作,点击方格来进行属于你的个人创作。

当然它还有个神秘的功能,使用者还可以进行简单的后期制作,将你的作品保存下来传送给他人一起分享。

巨头们在音乐界掀起的这场AI“跨界试验”随着AI越来越聪明,在音乐创作上也会越走越远。

机器可以代替音乐作家做一些基础性的工作,耗时短、速度快,同时也在一定程度上增加了音乐创作者的创造力,并且为更多没有接受正规音乐教育,但同时热爱音乐的人敞开了大门。

f3792333a5a55f597333a1712dbb889c.gif

-END-

ae77c699d990624bcdde2d46de55493b.png

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
智慧校园整体解决方案是响应国家教育信息化政策,结合教育改革和技术创新的产物。该方案以物联网、大数据、人工智能和移动互联技术为基础,旨在打造一个安全、高效、互动且环保的教育环境。方案强调从数字化校园向智慧校园的转变,通过自动数据采集、智能分析和按需服务,实现校园业务的智能化管理。 方案的总体设计原则包括应用至上、分层设计和互联互通,确保系统能够满足不同用户角色的需求,并实现数据和资源的整合与共享。框架设计涵盖了校园安全、管理、教学、环境等多个方面,构建了一个全面的校园应用生态系统。这包括智慧安全系统、校园身份识别、智能排课及选课系统、智慧学习系统、精品录播教室方案等,以支持个性化学习和教学评估。 建设内容突出了智慧安全和智慧管理的重要性。智慧安全管理通过分布式录播系统和紧急预案一键启动功能,增强校园安全预警和事件响应能力。智慧管理系统则利用物联网技术,实现人员和设备的智能管理,提高校园运营效率。 智慧教学部分,方案提供了智慧学习系统和精品录播教室方案,支持专业级学习硬件和智能化网络管理,促进个性化学习和教学资源的高效利用。同时,教学质量评估中心和资源应用平台的建设,旨在提升教学评估的科学性和教育资源的共享性。 智慧环境建设则侧重于基于物联网的设备管理,通过智慧教室管理系统实现教室环境的智能控制和能效管理,打造绿色、节能的校园环境。电子班牌和校园信息发布系统的建设,将为智慧校园的核心和入口,提供教务、一卡通、图书馆等系统的集成信息。 总体而言,智慧校园整体解决方案通过集成先进技术,不仅提升了校园的信息化水平,而且优化了教学和管理流程,为学生、教师和家长提供了更加便捷、个性化的教育体验。
经导师精心指导并认可、获 98 分的毕业设计项目!【项目资源】:微信小程序。【项目说明】:聚焦计算机相关专业毕设及实战操练,可课程设计与期末大业,含全部源码,能直用于毕设,经严格调试,运行有保障!【项目服务】:有任何使用上的问题,欢迎随时与博主沟通,博主会及时解答。 经导师精心指导并认可、获 98 分的毕业设计项目!【项目资源】:微信小程序。【项目说明】:聚焦计算机相关专业毕设及实战操练,可课程设计与期末大业,含全部源码,能直用于毕设,经严格调试,运行有保障!【项目服务】:有任何使用上的问题,欢迎随时与博主沟通,博主会及时解答。 经导师精心指导并认可、获 98 分的毕业设计项目!【项目资源】:微信小程序。【项目说明】:聚焦计算机相关专业毕设及实战操练,可课程设计与期末大业,含全部源码,能直用于毕设,经严格调试,运行有保障!【项目服务】:有任何使用上的问题,欢迎随时与博主沟通,博主会及时解答。 经导师精心指导并认可、获 98 分的毕业设计项目!【项目资源】:微信小程序。【项目说明】:聚焦计算机相关专业毕设及实战操练,可课程设计与期末大业,含全部源码,能直用于毕设,经严格调试,运行有保障!【项目服务】:有任何使用上的问题,欢迎随时与博主沟通,博主会及时解答。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值