AI音乐声音克隆实操--用海绵宝宝的声音唱歌(Replay +RVC)

1. 目标

通过AI实现音乐声音克隆。（比如用海绵宝宝的声音唱歌）

2. 技术方案

通过RVC进行声音模型训练，Replay进行声音替换。

3. RVC声音模型训练

3.1 RVC下载安装

github地址：https://github.com/RVC-Project/Retrieval-based-Voice-Conversion-WebUI

官网提供了集成包下载，可直接下载使用，但是需要显卡。

3.2 目标声音采集

可以通过录屏、下载、录音等方式采集目标声音（比如海绵宝宝），并处理为MP3格式。

3.3 人声伴奏分离

如上将目标声音文件路径复制到此处，然后点击转换，会将人声分离出来并保存到opt文件夹下。

如上，然后将上面instrument开头的文件删除，仅保留人声即可。

3.4 开始训练

训练成功结果如下图，如果出现错误，可根据提示进行修改。

3.5 保存结果

为了方便使用将声音pth文件和added***.index放在一个文件夹下

需要注意，模型训练后会有很多pth文件。
需要在assets/weights/ 文件夹下找到模型名字的pth文件。

4. Replay加载音乐和模型

5. 软件和模型下载

上面用到的软件和声音模型可通过下面网盘链接下载：
链接：https://pan.quark.cn/s/c7a5818ae0d6

如果上面的内容对你有帮助欢迎点赞关注。