浏览瞬间破万 | 超强SD插件AnimateDiff极致稳定动画教程来了!

276 篇文章 5 订阅

AI做稳定动画的新教程,这一次的稳定效果,比上一次和上上次都更加惊艳,而且实现难度直线下降!B站刚一更新,浏览就瞬间破万。

图片

重点是:更简单!更高效!

图片

在之前的AI稳定动画教程里,我先是利用Temporal-Kit和Ebsynth共同实现了稳定的动画重绘技术,可以在SD中实现真实视频、2D动画和3D动画之间的两两互转,几乎可以实现任何风格的特效画面:

之后,他又创新性地进行了SD转绘效果测试,利用ControlNet的SoftEdge控制器、TemporalNet一致性控制器,以及后期合成软件达芬奇的Fusion,实现了更加稳定的动画效果和背景替换技术:

图片

老王是如何实现第三代稳定动画效果的迭代呢?这就不得不提到标题中的SD插件AnimateDiff啦!

AnimateDiff在SD的webUI中使用起来,那是非常的简单直接,没有太多参数设置,主要依赖SD自身功能,就可以很好实现文生动画、图生动画、视频重绘动画等动画方式,动画的效果流畅稳定,动作也很准确。

图片

图片

以AnimateDiff文生图+ControINet操作为例,可以利用外部视频生成可控制的动画。流程是这样的:

打开SD的Web UI,在Temporal-Kit插件中找到预先下载的外部视频,将其放到预处理中,设置统一参数后分解出关键帧。

图片

图片

在文生图中,我们输入提示词及反向提示词。

图片

并适当加入几个Embedding模型,修手啊、加速啊等等,来提高生图速度。

图片

设置完成后勾选ControlNet,并选择关键帧进行测试。

图片

很多人喜欢用OpenPose的方式来做ControlNet控制,但经过测试我们发现,OpenPose不能还原相对复杂的动作,换成二阶蒸馏这种方式会更精细。

图片

然后,勾选AnimateDiff,并打开批量处理,依次设置帧数、闭环,选择迭代步数等等,有面部优化插件也选上。

图片

图片

图片

最终获得满意且稳定的动画效果:

图片

如果想要调节图像和动画的尺寸大小,还可以借助SD后期处理功能,快速将它放大一倍。最后导入剪映、PR等剪辑软件中,将其快速制作成动画文件。

你还可以导出PNG文件,给你的动画角色一键替换背景:

图片

而文初所展示的三组动画,依次分别由文生图+Depth深度贴图控制、图生图+Depth深度控制,以及图生图+Lineart+Depth控制生成,配合Fusion的稳定性处理,动画画面的质量稳得一批。

图片

这两天,火星老王又更新了一期AI做稳定动画的新教程,这一次的稳定效果,比上一次和上上次都更加惊艳,而且实现难度直线下降!B站刚一更新,浏览就瞬间破万。

图片

这部分教学内容,也被收录在火星老王的《SD商业设计全场景实战课》中,几乎可以说是有手就会,非常适合追求高效高质效果的商用场景!

重点是:更简单!更高效!

图片

在之前的AI稳定动画教程里,老王先是利用Temporal-Kit和Ebsynth共同实现了稳定的动画重绘技术,可以在SD中实现真实视频、2D动画和3D动画之间的两两互转,几乎可以实现任何风格的特效画面:

,时长00:16

之后,他又创新性地进行了SD转绘效果测试,利用ControlNet的SoftEdge控制器、TemporalNet一致性控制器,以及后期合成软件达芬奇的Fusion,实现了更加稳定的动画效果和背景替换技术:

图片

老王是如何实现第三代稳定动画效果的迭代呢?这就不得不提到标题中的SD插件AnimateDiff啦!

AnimateDiff在SD的webUI中使用起来,那是非常的简单直接,没有太多参数设置,主要依赖SD自身功能,就可以很好实现文生动画、图生动画、视频重绘动画等动画方式,动画的效果流畅稳定,动作也很准确。

图片

图片

以AnimateDiff文生图+ControINet操作为例,可以利用外部视频生成可控制的动画。流程是这样的:

打开SD的Web UI,在Temporal-Kit插件中找到预先下载的外部视频,将其放到预处理中,设置统一参数后分解出关键帧。

图片

图片

在文生图中,我们输入提示词及反向提示词。

图片

并适当加入几个Embedding模型,修手啊、加速啊等等,来提高生图速度。

图片

设置完成后勾选ControlNet,并选择关键帧进行测试。

图片

很多人喜欢用OpenPose的方式来做ControlNet控制,但经过测试我们发现,OpenPose不能还原相对复杂的动作,换成二阶蒸馏这种方式会更精细。

图片

然后,勾选AnimateDiff,并打开批量处理,依次设置帧数、闭环,选择迭代步数等等,有面部优化插件也选上。

图片

图片

图片

最终获得满意且稳定的动画效果:

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

如果想要调节图像和动画的尺寸大小,还可以借助SD后期处理功能,快速将它放大一倍。最后导入剪映、PR等剪辑软件中,将其快速制作成动画文件。

你还可以导出PNG文件,给你的动画角色一键替换背景:

图片

而文初所展示的三组动画,依次分别由文生图+Depth深度贴图控制、图生图+Depth深度控制,以及图生图+Lineart+Depth控制生成,配合Fusion的稳定性处理,动画画面的质量稳得一批。

图片

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

1.stable diffusion安装包 (全套教程文末领取哈)

随着技术的迭代,目前 Stable Diffusion 已经能够生成非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替代,比如制作一个 logo 图片,画一张虚拟老婆照片,画质堪比相机。

最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!此外还带来了Mac版本,仅支持macOS 12.3或更高版本

在这里插入图片描述

2.stable diffusion视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入坑stable diffusion,科学有趣才能更方便的学习下去。

在这里插入图片描述

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果,这时则需要通过使用大量训练数据,调整模型的超参数(如学习率、训练轮数、模型大小等),可以使得模型更好地适应数据集,并生成更加真实、准确、高质量的图像。

在这里插入图片描述

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。

在这里插入图片描述

5.AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

Animate是一个实用框架,旨在将现有的大多数个性化文本到图像模型转化为动画生成器。它包括一个经过训练的运动建模模块,可以从大型视频数据集中提取出通用的运动先验。通过将运动模块插入到个性化模型中,AnimateDiff可以生成具有自然、适当运动的动画图像,同时忠实于相应的领域。它已经在多种个性化文本到图像模型上进行了广泛评估,并证明了其有效性和通用性。AnimateDiff为个性化动画提供了一个简单而有效的基线,有可能使广泛的应用受益。 如果你对AnimateDiff感兴趣,你可以在github上找到该框架的详细信息和代码实现。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [AnimateDiff论文解读-基于Stable Diffusion文生图模型生成动画](https://blog.csdn.net/qq_41994006/article/details/132011849)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *2* *3* [AnimateDiff Animate Your Personalized Text-to-Image Diffusion Models without Specific Tuning 机器...](https://blog.csdn.net/qcwlmqy/article/details/132069221)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值