Paints-UNDO优化版,模拟从0-1的绘画过程

哟呼！好久不见。本期给大家介绍一个图片转视频的项目。比较有意思的是它可以生成某张图像的从0到最终的绘画过程。

【Paints-UNDO优化版,模拟从0-1的绘画过程】 https://www.bilibili.com/video/BV1nM4m1y7yd/?share_source=copy_web&vd_source=09316244e4ff3a9793930d67cf748288

例如上传一张图像。

就可以生成该图像从白纸、线稿、填色、最终的图像这个过程。

还可以提取关键帧

关于改动

GitHub官方原版对于显存的要求比较高，需要10~12.5G显存。

对于我的2080来说实在是勉为其难，于是我花了些时间来做了显存优化。

优化后的显存占用差不多在5.7G左右(最后生成视频时解码操作显存会增加些)，2080也可以玩耍了！

配置要求

WIN

• Windwos10/11操作系统
• 支持N卡GPU 最低显存要求8G(如果是6G显存请自行测试)

Mac

Mac本地暂不支持，可以使用云端镜像版本。

云端一键部署镜像

使用方法

上传一张图像，点击生成提示词，通过WD14反推拿到该图像的描述词。

然后来到步骤二通过paints_undo_single_frame模型生成关键帧。生成关键帧的一些参数可以在左侧调节。

操作步骤，这个参数需要讲解下，假设一张图片是个可以通过1000次的操作来完成（例如，一笔刷就是一次操作），这个选项是可以选择0-999之间的整数，数字0代表最终完成的作品，数字999代表一张白纸上的第一笔。

你可以将这个模型理解为一个“撤销”（或者称为Ctrl+Z）模型。你输入最终的图片，并指明你想要“Ctrl+Z”多少次，模型将给出在按下这些“Ctrl+Z”之后的一个“模拟”截图。如果你的操作步骤是100，那意味着你想要在这个图片上模拟“Ctrl+Z”100次，以得到第100次“Ctrl+Z”之后的图像。

最后步骤三来生成最终的视频。这一步会使用paints_undo_multi_frame模型对上面生成的关键帧进行补帧操作。并生成所有的画面帧。

最终的视频效果

整合包获取

👇🏻👇🏻👇🏻下方下方下方👇🏻👇🏻👇🏻

【Paints-UNDO优化版,模拟从0-1的绘画过程】 https://www.bilibili.com/video/BV1nM4m1y7yd/?share_source=copy_web&vd_source=09316244e4ff3a9793930d67cf748288

关注公众号。发送【0721】关键字获取整合包。

如果发了关键词没回复你！记得看下复制的时候是不是把空格给粘贴进去了

制作不易，如果本文对您有帮助，还请点个免费的赞或在看！感谢您的阅读！