【LUMIERE】Google 高质量视频生成AI ——1月24号重磅来袭

关于LUMIERE

2024年1月24号，Google宣布了一款超高品质的视频生成AI“Lumiere”。
链接: LUMIERE

功能介绍

亮点1：文本到视频和图像到视频

现在有许多能够通过输入文本或图片生成视频的AI存在，但这些AI中的大多数都采用了“生成多帧并在帧之间进行插值”的方法来生成视频，这使得帧与帧之间的连接往往显得不自然。而Lumiere则采用了“一次性生成整个视频帧”的方法，使得帧与帧之间的连接自然流畅，生成的视频更少违和感。Lumiere能够生成的视频帧率为16fps，视频长度为5秒。

亮点2：画风迁移

在以下的例子中，保持了“贴纸风格中绘制的树木”这一风格，同时生成了关于鸭子、蝴蝶等不同主题的视频。

这是一个保持“熔化的黄金”风格来生成视频的例子。

亮点3：运动蒙板

静态图片变动画，哪里想动画哪里。

亮点4：视频编辑

支持重绘视频中的任意区域和对象

亮点5：视频修复

能修复视频中缺失的画面

总结

Lumiere AI的功能真的很强大，大家一起来期待一下吧。
现在 （2024年1月26日）Lumiere尚未对外公开，但想要了解更多信息或者想要看到它实际应用的人可以访问Lumiere的网站。网站上公开了许多该模型执行各种任务的演示。
链接: LUMIERE