LivePortrait是一项革新性的技术,它能够将静态的照片转换成动态的视频,使照片中的人物或动物做出各种表情和动作。以下是对LivePortrait技术的详细介绍:
一、开发背景与团队
LivePortrait由快手科技、中国科学技术大学以及复旦大学联手开发,并在GitHub上开源提供下载。这一技术的推出,旨在为用户提供更加生动有趣的视觉体验。
二、技术原理与特点
-
隐式关键点框架:
- LivePortrait采用隐式关键点(implicit keypoints)框架,这一方法避免了主流基于扩散的方法的计算开销,从而大幅提升了计算效率。
- 通过引入隐式关键点作为中间的运动表示,LivePortrait平衡了生成质量和计算效率。
-
高效性与高质量:
- 在高性能显卡(如RTX 4090)上,LivePortrait的生成速度非常快,每帧生成速度可达12.8毫秒,非常适合实时动画