亚马逊云科技×ElevenLabs，AI歌声合成引擎出海实践

关键字: [出海日城市巡展, ace studio, Ai歌声合成, 音乐创作工具, 出海实践经验, 本地化策略, 增长营销合作]

本文字数: 1900, 阅读完需: 10 分钟

导读

在这场演讲中,赵文潇分享了ElevenLabs的AI歌声合成引擎ace的出海实践。他介绍了ace的功能特点,如可合成多种风格的人声、支持编辑调整等,以及与虚拟偶像洛天依的合作案例。赵文潇解释了选择出海的原因,包括音乐市场差异、产品不受地域限制,以及利用国内人才优势等。他分享了出海过程中的实践经验,如多语言支持、付费模式调整、寻找合适的海外大V合作伙伴、本土化设计等,并总结了一些反思和建议。

演讲精华

以下是小编为您整理的本次演讲的精华，共1600字，阅读时间大约是8分钟。

在泛娱乐行业论坛上,来自ElevenLabs的赵文潇分享了他们公司的AI歌声合成引擎产品ace及其出海实践。ace是一款桌面端AI歌声合成软件,它可以使用多种风格的高水平AI虚拟歌手为用户的歌曲创作。通过ace,音乐制作人们可以打破传统创作的局限,不再受制于邀请真人歌手的限制。AI歌手可应用于单曲创作、demo制作、合声配唱等多种场景,极大提高了创作效率,节省了大量的金钱和时间成本。

ace拥有多种独特的AI虚拟歌手,如流行摇滚风的”摇尾”、温柔甜美风的”your time”、日系清新风的”每升水箱比小乔”等。通过AI声线混合功能,还可创造出独一无二的全新声线。ace studio操作简单,只需输入旋律和歌词,或录制灵感素材后一键识别,即可让AI歌手呈现出理想的演唱效果。用户还可以通过绘制音高线和调整AI情感参数,精雕细琢每一处细腻的表情,让创造力得到完全释放。

赵文潇解释道,他们的AI歌声合成模型相对专一,输入为旋律和歌词,输出为人声。与一些流行的音乐生成模型如Riffusion、MusicCaps等不同,ace更侧重于满足专业人士的需求,允许用户细致地调整声线、音高线等参数。一些自媒体人士曾尝试将这些大模型生成的音乐导入ace,分离出人声部分,再结合ace的转谱功能对谱面进行编辑,最终合成出自己理想中的歌声。

除了面向个人用户的客户端产品,ElevenLabs还与一些企业开展定制合作。其中,国内知名虚拟偶像洛天依的AI声音就是他们独家提供的。在AI技术不太成熟的过去,洛天依使用的是日本雅马哈Vocaloid的拼接方案,声音虽然很有特色,但也存在一些明显的缺陷。随着AI技术的进步,洛天依的运营方希望将其声音AI化,因此与ElevenLabs展开合作。ElevenLabs在保留洛天依原有声音特点的基础上,使其在衔接处更加自然流畅。

此外,ElevenLabs还为一些明星歌手提供过定制服务,使用他们的声音训练模型,让AI能够用他们的嗓音演绎不同语种的歌曲。对于不同客户的特殊需求,如歌剧唱腔等,ElevenLabs也会根据需求重新训练专门的模型。比如有一位明星上综艺节目时,ElevenLabs使用他的声音训练了一个模型,让AI能用他的嗓音演绎英语歌曲。

最近,ElevenLabs还上线了一个AI声音克隆的咨询平台。用户只需提供2-3首自己的歌曲素材,他们就能为用户训练出一个个性化的AI歌手模型。上线后,不少用户开始用自己宠物的叫声、童年时期的录音等有趣素材训练出属于自己的AI歌手。其中有一个例子是,ElevenLabs的一位同事小时候被母亲录下了一段视频,留存了他童年的声音。通过这段录音,他训练出了一个能用他童年嗓音演绎中文、英文、日文歌曲的AI歌手模型。

赵文潇表示,ace是一款相对垂直的音乐创作工具,普通用户可能会觉得上手较难。为此,ElevenLabs正在努力优化,比如提供更多现成的模板,并与其他模型结合,让用户无需输入旋律和歌词,直接生成完整的歌曲作品。最近在抖音上,有一些用户利用ace改编了流行的”小米夫妻”的歌词,取得了不错的热度。

那么,为什么ElevenLabs选择将ace出海呢?赵文潇总结了三个主要原因:

首先,音乐市场在全球范围内存在较大差异。从数据上看,海外音乐流媒体平台Spotify的注册用户数为网易云音乐的10多倍;根据一项研究报告,美国音乐创作者的人均收入是中国的11倍,制作人收入是中国的2倍;YouTube上专业音乐教学类博主DoctorMix拥有70多万订阅者,而国内同类博主粤财派仅有10万订阅。这些数据反映出海外音乐市场的庞大潜力。

其次,ElevenLabs相信好的产品是不会受到地域限制的。一款优秀的产品,无论是在国内还是国外,都应该能获得成功。

最后,中国在人工智能领域拥有大量优秀的人才资源,ElevenLabs有责任将自己的优秀产品推向全球市场,避免人才在国内过度同质化竞争。

在正式出海之前,ElevenLabs先完成了一些必要的功能支持,包括多语种支持、口音优化、登录方式本地化、付费渠道接入等,以确保ace能够顺利在海外使用。

在系统架构方面,ElevenLabs前期的服务器都在国内,后来在前端加入了全球加速服务,同时在亚马逊云科技上部署了海外服务集群,以提升海外用户的使用体验。由于遇到了一些DNS解析问题,他们通过DNS over HTTPS的方式成功解决,解析成功率提高至60%以上。

付费策略方面,ElevenLabs最初采用的是年费制,如一年人民币198元,但发现转化率仅为7%左右。后来改为订阅模式,虽然试用门槛提高了,但付费转化率提升至16%左右。

在增长方面,ElevenLabs起步阶段非常艰难。最初自行运营社交媒体账号、投放广告的效果都不太理想。后来他们反思,发现产品定位是关键,需要锁定目标受众群体。于是他们开始在YouTube上寻找合适的大V进行合作,通过大V的影响力为ace带来大量新用户,效果非常显著。赵文潇分享了几个成功的大V合作案例,其中DoctorMix的一个合作视频播放量高达60万,远高于他的平均水平5万至10万;而另一个博主的合作视频播放量则相对一般,说明受众群体存在偏差。这些数据说明,选择合适的大V至关重要,需要对方的受众群体与ace的目标群体契合。

目前,ElevenLabs的海外收入已经超过了国内。除了自然流量外,还有其他语种的博主自发为ace做了宣传,如希伯来语和俄语博主。一些专业的音乐人也在使用ace制作作品,如虚拟偶像音乐制作人People,他用ace的AI歌手开了演唱会并发行了专辑。

通过这段出海实践,ElevenLabs也有了一些反思和收获:

1. 前期的惨淡是正常的,但只要保准产品定位,坚持下去就一定能取得成功。
2. 寻找合适的海外大V合作至关重要,但需要先建立足够的信任关系。他们曾亲自参加海外音乐展会,与到场的大V面对面交流,展示产品实力,最终赢得了合作机会。
3. 本土化不仅仅是语言翻译,更要深入了解当地的习惯和文化。ElevenLabs起初认为只要将界面翻译成英文就算本土化,后来发现成功的产品往往在细节处体现出与中国产品的差异,如排版方式、用语习惯等。
4. 付费模式的调研非常关键,要充分借鉴行业最佳实践。ElevenLabs在付费模式上经历了多次调整,最终遵循了通用的订阅制模式。

总之,通过不懈的努力,ElevenLabs终于在海外市场取得了令人振奋的成绩。赵文潇希望他们的经验能为大家的出海之路提供一些有益的参考。

总结

在这场演讲中,赵文潇分享了他们公司ElevenLabs开发的AI歌声合成引擎ace的出海实践经验。ace是一款桌面端AI歌声合成软件,可以使用多种风格的AI歌手为音乐创作提供高水准的人声。他们最初将产品定位于国内市场,但后来意识到海外市场的巨大潜力,因此决定出海。

赵文潇阐述了他们为出海所做的准备工作,包括多语言支持、口音优化、登录方式调整、付费渠道整合以及服务架构优化等。他还分享了他们从年费模式转向订阅模式的付费策略调整,以提高转化率。在增长历程中,他们最初尝试自运营社交媒体和投放广告,效果不佳。后来他们开始与海外大V合作,效果显著,这需要建立信任关系并深入了解目标受众习惯。

目前,ElevenLabs的海外收入已超过国内,他们不仅获得了自然流量,还吸引了其他语种博主的宣传,专业音乐人也开始使用他们的产品制作作品。最后,赵文潇总结了一些反思,包括保准产品定位的重要性、本土化不仅是语言翻译、付费模式调研要充分等。