OpenBayes 教程上新 | 青岛小哥焦恩俊版二郎神来袭,MuseV + MuseTalk 分分钟实现高质量数字人制作!

使用传统的数字人训练方案生成一个高质量的数字人,常常需要大量的时间和算力资源,同时对训练素材的要求也较高,如果想要达到良好的唇形一致效果,通常需要数小时乃至更久。

MuseV 和 MuseTalk 的出现为数字人领域带来了新的突破,使用 MuseV 生成数字人视频后,再使用 MuseTalk 实现唇形和音频的同步,短短几分钟内即可实现完整的数字人制作。

「MuseV 不限时长的虚拟人视频生成 Demo」和「MuseTalk 高质量口型同步模型 Demo」均已上线至 OpenBayes 的公共教程模块,已经为大家搭建好了环境,无需输入任何命令,一键克隆即可立即启动!

教程地址:

* MuseV:

https://go.openbayes.com/7Qs1v

* MuseTalk:

https://go.openbayes.com/plbE3

为了让大家更好的理解,B 站 Up 主「闹闹不闹nowsmon」录制了详细的教学视频,欢迎大家一键三连哦~

https://www.bilibili.com/video/BV1fCWVeWEic/?spm_id_from=333.337.search-card.all.click&vd_source=5e54209e1f8c68b7f1dc3df8aabf856cicon-default.png?t=N7T8https://www.bilibili.com/video/BV1fCWVeWEic/?spm_id_from=333.337.search-card.all.click&vd_source=5e54209e1f8c68b7f1dc3df8aabf856c

小贝最近沉迷于「黑神话悟空」,里面的二郎神让人又爱又恨,很多玩家吐槽他的脸不够帅气,将其换成了「国民杨戬」焦恩俊,在此基础上小贝用 MuseV + MuseTalk 生成了会说青岛话的焦恩俊版二郎神,快来听听这味儿正不正~

操作步骤

01

使用 MuseV 生成虚拟人视频

1. 登录 OpenBayes.com,在「公共教程」页面,选择「MuseV 不限时长的虚拟人视频生成 Demo」。

图片

2. 页面跳转后,点击右上角「克隆」,将该教程克隆至自己的容器中。

图片

3. 点击右下角「下一步:选择算力」。

图片

4. 页面跳转后,选择「NVIDIA RTX 4090」以及「PyTorch」镜像,点击「下一步:审核」。新用户使用下方邀请链接注册,可获得 4 小时 RTX 4090 + 5 小时 CPU 的免费时长!

小贝总专属邀请链接(直接复制到浏览器打开):https://go.openbayes.com/9S6Dr

图片

5. 确认无误后,点击「继续执行」,等待分配资源,首次克隆需等待 2 分钟左右的时间。当状态变为「运行中」后,点击「API 地址」边上的跳转箭头,即可跳转至 Demo 页面。请注意,用户需在实名认证后才能使用 API 地址访问功能。

如果打开 API 地址显示「BadGateway」,说明模型还没有加载完毕,稍等 1-2 分钟后,再打开 API 地址即可。

图片

图片

图片

6. 打开 Demo 后,上传一张图片并输入 Prompt,Prompt 的格式为质量词+人物主体+动作词,例如 (masterpiece, best quality, highres:1),(1boy, solo:1),(eye blinks:1.6),(hair wave:1.3),输入后点击「Generate」,等待片刻,即可生成视频。

图片

 

02

使用 MuseTalk 实现唇形和音频同步

1. 回到「公共教程」界面,打开「MuseTalk 高质量口型同步模型 Demo」。

图片

2.  页面跳转后,点击右上角「克隆」,将该教程克隆至自己的容器中。

图片

3. 点击右下角「下一步:选择算力」。

图片

4. 页面跳转后,依旧选择「NVIDIA RTX 4090」 和「PyTorch」镜像,点击「下一步:审核」。

图片

5. 确认无误后,点击「继续执行」,等待分配资源,首次克隆需等待 2 分钟左右的时间,待状态显示为「运行中」后,点击「API 地址」边上的跳转箭头,打开 Demo。

图片

图片

图片

6. 进入 MuseTalk Demo 页面,将我们刚刚制作好的视频上传后,再上传一段音频,点击「Generate」,等待一会儿,就可以看到新生成的视频中人物的唇形和音频是一致的了。

图片

 

开学季特惠

OpenBayes 开学季特惠强势来袭,福利抽奖+充值返现两大惊喜活动上线,中奖率 100%,最高可得 10 小时 RTX 4090 免费使用时长,扫码了解更多活动详情!

图片

新用户福利

* 注册福利:点击下方邀请链接注册,即可获得 4 小时 RTX 4090 + 5 小时 CPU 的免费算力时长,永久有效! 

小贝总专属邀请链接(直接复制到浏览器打开):

https://go.openbayes.com/9S6Dr

  • 5
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值