Seed-Music是一个由字节跳动研发的音乐生成模型,用户可以通过输入多模态数据(如文本描述、音频参考、乐谱、声音提示等)来生成音乐,并且提供了方便的后期编辑功能,比如修改歌词或旋律。
Seed-Music 结合了自回归语言模型和扩散模型,在保持音乐生成质量的同时,提供了对生成音乐的精确控制。
Seed-Music还支持用户上传短暂的语音片段,系统会将其转换为完整的歌声。
此外,Seed-Music不仅支持声乐和器乐生成,还支持歌声合成、歌声转换、音乐编辑等功能,适用于不同的用户群体。
主要功能
- 高质量音乐生成:支持生成声乐和器乐作品,用户可以通过文本、音频等多种方式输入,实现多样化的音乐创作。
- 受控音乐生成:提供细粒度的音乐控制,允许用户根据歌词、风格描述、参考音频、乐谱等生成符合要求的音乐。
- 多模态输入:Seed-Music 支持多种输入方式,如歌词、音乐风格描述、参考音频、乐谱、语音提示等,从而实现细粒度的控制。
- 风格控制:用户可以通过文本或音频参考,指定音乐的风格、节奏、曲调等,生成符合需求的作品。