欢迎关注《前端点线面》,开车不迷路
今天要介绍的是一款快手开源的项目——LivePortrait,这是一个开源的人像动画技术库,它能以细致入微的方式赋予人像照片生动性,通过模拟丰富的面部表情如眨眼、张嘴等动作,让照片中的人物仿佛获得了生命。其实现过程无比复杂(这么复杂其实了解吹逼就行,外门汉来使用不用考虑这么多),简单总结为:
图像分析:首先分析输入图像,识别面部特征、表情和其他相关细节。
运动合成:使用一个 "驱动" 视频作为参考,提取运动数据并应用到静态图像中。
面部重建:系统以3D形式重建面部,实现逼真的运动和表情。
表情映射:AI将驱动视频的表情映射到目标图像上,确保自然的动画效果。
音频同步:对于涉及到语音的应用,系统将唇语动作与音频输入同步
github地址:https://github.com/KwaiVGI/LivePortrait?tab=readme-ov-file
官网地址:https://liveportrait.org/zh
免费体验地址:
(1)https://liveportrait.org/zh/playground
(2)https://huggingface.co/spaces/KwaiVGI/LivePortrait
效果体验
找个视频和图片,自己体验一波,就拿追的动漫《斗破苍穹》中的男主角萧炎来恶搞一波吧,最终A+B产出了恶搞后的效果C,看着还真有那点意味。
炫酷demo
其实官方也提供了很多有趣的demo,可以一起来看下。
照片动画:Live Portrait AI 使用重演技术为静态照片中的人物制作动画,匹配驱动视频的头部运动、面部表情、情感,甚至声音。这为静态图像注入了新的生命力。
动物动画:使用我们先进的 AI 动画技术为您喜爱的动物照片赋予生命。观看宠物、野生动物等静态图像转变为迷人、逼真的动画视频
通过拼接从静态图像制作肖像动画:适用于各种风格(写实、油画、雕塑、3D 渲染)和不同尺寸
通过拼接进行肖像视频编辑: 使用 Live Portrait AI 为照片制作动画,轻松创建个性化视频消息、问候和公告。非常适合个性化视频通信。
……
茶已备好,只待君来!感谢关注 前端点线面 (>‿<),本号定期推荐原创深度好文,帮助每一位在前端领域打拼的伙伴们走向前列。此外,《工具人的工具箱》小程序也上线了,内含11个模块338道面试题,不容错过!!!
工具人的工具箱