Stable Diffusion 动画生成新突破:AnimateDiff 技术解析

如果放在几年前,你告诉我说只需一分钟就能做出一段这样的动画,我是万万不相信的,但是当AI时代来临之后,一切都有了可能。

今天给大家介绍一个可以快速在sd中生成动画的方法,就是一个叫做AnimateDiff的免费开源项目。现在已经整合到了webUI上面,使用起来非常方便。

注意:(如果大家不会在GITHUB上下载的话,文末可以自行扫描获取相关插件和安装包哦)

在这里插入图片描述

接下来我们还要安装专属的动画模型,下载地址为:https://huggingface.co/guoyww/animatediff/tree/refs%2Fpr%2F3。目前最新的是mm_sd_v15_v2.safetensors
,动画的活动范围更大,效果也最好,我们下载这个就行了。

在这里插入图片描述

模型要放在这个地址下“……\sd-webui-aki-v4.2\extensions\sd-webui-animatediff\model”。

在这里插入图片描述

安装完成插件之后,需要将 WebUI 更新到 v1.6.0,并且将 ControlNet 更新到
v1.1.410。是的,这个插件是可以支持controlnet的。

接下来就可以看到这个插件了,动画模型选择我们刚才下载的那个,同时启用这个就可以运行了。

在这里插入图片描述

帧率默认是8,如果我们想要一个4秒的动画,总帧数设置为32就可以了。

在这里插入图片描述

开启闭环可以得到一个无限循环的动画。

在这里插入图片描述

输出格式,通常我们会选择GIF,如果想要每一帧单独的输出,可以选择png。

在这里插入图片描述

接下来,我们选择模型,并输入提示词,我描述的是“一只在草原上奔跑的白马”。

在这里插入图片描述

参数可以按照正常出图的思路设置,尺寸512x512,根据电脑配置量力而行。

在这里插入图片描述

点击生成,就可以得到一幅白马奔跑的小动画了,不过这幅图的马腿脚看上去有点不太自然。

同时,这个动画插件还可以在图生图中使用。比如我们在文生图中生成了一张白马的静态图片,然后将它发送到图生图中。

在这里插入图片描述

提示词中我们可以增加“流动的云、奔跑的马”等提示词。

在这里插入图片描述

重绘幅度设置为0.8,数值越大,动态越明显,如果数值太小,马就不会跑起来。

在这里插入图片描述

我们可以看到,白马就奔跑了起来,而且天空中有云层的流动。当然我们有一说一,这个马奔跑的效果还不是很完美。

我们还可以配合lora来做一些镜头控制,可以让动画的控制变得更强。lora的下载地址为:https://github.com/guoyww/AnimateDiff#features,包括有向左平移、向右平移、逆时针转动、顺时针转动、向下移动、向上移动、放大、缩小。

在这里插入图片描述

我们先使用文生图生成一个女孩在街头的动态图片,可以看到这时候的镜头是稳定不动的。

接下来我增加一个v2_lora_Zoomout的lora,来控制镜头的缩小。

在这里插入图片描述

我们就得到了一个希区柯克式的变焦效果,拍摄效果非常不错。

再做一些其他的动图吧。

以上,就是关于AnimateDiff的使用方法。它的出现为我们制作AI动画创造了可能性,期待它进一步的进化和完善。

3703e9b7cc9380f7747c3b9.gif)

以上,就是关于AnimateDiff的使用方法。它的出现为我们制作AI动画创造了可能性,期待它进一步的进化和完善。

这是一位SD资深大神整理的,100款Stable Diffusion超实用插件,涵盖目前几乎所有的,主流插件需求。

这份完整版的SD整合包已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

在这里插入图片描述

全文超过4000字。

我把它们整理成更适合大家下载安装的【压缩包】,无需梯子,并根据具体的内容,拆解成一二级目录,以方便大家查阅使用。

单单排版就差不多花费1个小时。

希望能让大家在使用Stable Diffusion工具时,可以更好、更快的获得自己想要的答案,以上。

如果感觉有用,帮忙点个支持,谢谢了。

想要原版100款插件整合包的小伙伴,可以来点击下方插件直接免费获取

img

100款Stable Diffusion插件:

面部&手部修复插件:After Detailer

在我们出图的时候,最头疼的就是出的图哪有满意,就是手部经常崩坏。只要放到 ControlNet 里面再修复。

现在我们只需要在出图的时候启动 Adetailer 就可以很大程度上修复脸部和手部的崩坏问题

img

AI换脸插件:sd-webui-roop

换脸插件,只需要提供一张照片,就可以将一张脸替换到另一个人物上,这在娱乐和创作中非常受欢迎。

img

模型预设管理器:Model Preset Manager

这个插件可以轻松的创建、组织和共享模型预设。有了这个功能,就不再需要记住每个模型的最佳 cfg_scale、实现卡通或现实风格的特定触发词,或者为特定图像类型产生令人印象深刻的结果的设置!

img

现代主题:Lobe Theme

已经被赞爆的现代化 Web UI 主题。相比传统的 Web UI 体验性大大加强。

img

提示词自动补齐插件:Tag Complete

使用这个插件可以直接输入中文,调取对应的英文提示词。并且能够根据未写完的英文提示词提供补全选项,在键盘上按↓箭头选择,按 enter 键选中

img

提示词翻译插件:sd-webui-bilingual-localization

这个插件提供双语翻译功能,使得界面可以支持两种语言,对于双语用户来说是一个很有用的功能。

img

提示词库:sd-webui-oldsix-prompt

提供提示词功能,可能帮助用户更好地指导图像生成的方向。

上千个提示词,无需英文基础快速输入提示词,该词库还在不断更新。

以后再也不担心英文写出不卡住思路了!

img

这份完整版的SD整合包已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值