用PaddlePaddle做的视频模仿秀,很糙~

目标:

模仿秀的目的是根据流行的舞蹈视频,生成一段动作与其相似的用户视频。用户需要提供一段被模仿的视频短片,此外用户需要提供多段的素材视频,素材视频中用户可以模仿舞蹈视频的动作。工程会对舞蹈视频的动作进行分析,从素材当中找到与之最接近的动作图片,然后将所有图片进行接拼,最后生成一段自定义的舞蹈视频。

用飞桨做的舞蹈模仿秀

流程:

流程.png

AIStudio项目地址

还需要优化

目前完成了1.0版本。实测发现效果并不理想,后面还可以继续优化。
优化点:

  1. 动作匹配方法更新,目前是会对肢体的若干个角度。进行计算欧氏距离,找到最近的姿态。
  2. 异常情况处理,在计算角度的时候发现有些姿态的点重合了,导致角度无法计算,NaN
  3. 匹配计算速度需要优化
  4. 可以尝试将人抠出来,然后放到新的场景当中
  5. 在匹配过程中考虑动作的连续性

去github

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值