Stable Diffusion绘画 | AnimateDiff:用AI制作动画

使用 AnimateDiff 插件,我们只需要按时间节点,输入不同的提示词,就可以非常轻松地生成一系列丝滑的动画。

AnimateDiff 的底层技术框架,是由 上海人工智能实验室 & 香港中文大学 & 斯坦福大学 联合研发的,

它能很好地结合 SD 的各种模型,以及配合 ControlNet 和 Upscale 来生成出可控的高清丝滑视频。

提示词编写格式

AnimateDiff 的提示词分为3部分:

  • 头部提示词

例如:1girl, wizard, earrings

  • 时间提示词

例如:

0:fire magic spell, fire background,   8:ice magic spell, ice background,   16:thrnder magic spell, thunder background,   
  • 尾部提示词:可选填

例如:flowing hair

安装与设置

直接在 GitHub 上下载插件:

https://github.com/continue-revolution/sd-webui-animatediff

这份完整版的AIGC全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

在这里插入图片描述

解压后,放置在:SD安装目录\extensions

重启UI 后,即可在「文生图」、「图生图」界面看到 AnimateDiff 模块:

AnimateDiff 非常占用显卡内存,如果你的显卡内存只有 8GB,直接使用 AnimateDiff 生成视频的话,容易爆显存。

因此,需要进行以下的设置调整:

  1. 秋叶启动器中,「显存优化」设置为 中等显存(4GB 以上)

  1. 「设置」页面,取消勾选☑️ 批量应用正向/反向调整

  1. 保存设置并重启UI

完成以上设置,可节省 ⅕左右的显存消耗。

实操应用

AnimateDiff 有自己专用的动态模型,下载链接:https://huggingface.co/guoyww/animatediff/tree/main

下载后,将动态模型放置在:SD安装目录\extensions\sd-webui-animatediff\model

具体参数设置的介绍,可查看:https://cgmi.com/archives/481

提示词

按照前面的提示词格式,编写提示词:

1girl,   0: smile,in the school,long hair,   25: closed eyes,in the bedroom,   purple hair,   
其他设置

AnimateDiff 模块的参数设置主要有以下4个点,其他的可保持默认设置:

点击「生成」,可得到以下动画视频:

在这里插入图片描述

今天先分享到这里~

这份完整版的AIGC全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值