环境:
AI Sphere Butler
WSL2
CPU:Intel i9
英伟达4070ti 12G
Win10
Ubuntu22.04
问题描述:
开源项目AI Sphere Butler如何自定义训练替换数字人管家形象?
解决方案:
一、创建AI管家形象
1.前往创作AI视频网站,图生视频功能,参考图加提示词生成一个5秒左右的管家形象视频。
提示词如下:
脸部保持微微的笑,嘴巴始终闭合,模特站姿原地保持微微动不要侧身转动,等待拍摄视频状态。
参考图(也是AI生成)
图生视频
二、训练管家形象
1.下载前生成视频重命名123.MP4
2.将123.MP4放入项目\metahuman-stream\wav2lip目录下
3.进入项目虚拟环境
source ~/miniconda3/bin/activate nerfstream
4.运行转换训练命令
python genavatar.py --video 123.mp4 --img_size 256
5.等待一会制作完成,检查下面两个文件夹是否有下面文件
脸部图片
身体图片
三、替换更新管家形象
1.将metahuman-stream\wav2lip\results\avatars\wav2lip_avatar1文件夹复制到E:\work\metahuman-stream\data\avatars下面
四、结果测试
最后启动项目测试效果
效果测试
效果视频:
2025年开源全能管家项目AI Sphere Butler自定义管家形象更换测试