利用AnimateDiff让你生成的小姐姐动起来

今天和大家分享一款stable diffusion扩展AnimateDiff,利用AnimateDiff可以直接生成gif动图,让你生成的小姐姐动起来,这个功能有点类似与runway gen2的image to Video,但是更加具有可控性,话不多说,直接看效果图和对比图

原图

 

AnimateDiff

 

runway gen2

原图

 

AnimateDiff

runway gen2

插件安装方法:点击扩展插件-从网址安装,输入github地址 https://gitee.com/swordfishx/sd-webui-animatediff.git点击安装等待安装完毕之后重启webui即可

安装完成后还需要下载两个运动模块,我已经给大家准备好了,下载链接放在文章最后,大家下载完成之后放到extensions/sd-webui-animatediff/model/文件夹下即可

利用AnimateDiff让你生成的小姐姐动起来

大模型选择二次元的效果会比较好,采样器选择DPM++2M SDE Karras,提示词的书写需要比较精简,控制在75个tag内,且选择这类比较有动感的词汇如falling petals,wind,flying butterfly效果会比较好,图片会保存在stable-diffusion-webui/outputs/txt2img-images/AnimateDiff文件夹里。

正面提示词:(masterpiece, best quality),1girl,solo,cheery blossoms,pink flower,white flower,spring season,wisteria,petals,plum blossoms,outdoor,falling petals,wind,flying butterfly,

“杰作,最佳质量”,1个女孩,独奏,樱花,粉色花朵,白色花朵,春季,藤蔓,花瓣,梅花,户外,飘落的花瓣,风,飞舞的蝴蝶。

负面提示词:EasyNegativeV2,badhandv4,lowres,watermark,monochrome,watermask,

参数说明

  1. Motion module运动模块:选择任一即可,我这里使用的是mm_sdv15.ckpt
  2. Number of frames帧数— 该模型使用 16 帧进行训练,因此当帧数设置为 16帧时效果最好
  3. Frames per second (FPS)每秒帧数— 每秒显示多少帧(图像)。如果以每秒 8 帧的速度生成 16 帧,则 GIF 的持续时间为 2 秒。
  4. Display loop number循环次数— GIF 播放的次数。值0表示 GIF 永远不会停止播放。

利用AnimateDiff让你生成的小姐姐动起来

注意事项:

1.tag不要超过75个,不然会默认生成两段gif

2.目前还并不支持在图生图界面使用,最初版本可以,这个版本反而不行了,作者表示将会修复

3.不要开ADetailer(可以打开面部修复),不然脸部会崩坏的很严重,就像这样

4.不要开高清修复!不要开高清修复!不要开高清修复!及其容易爆显存

利用AnimateDiff让你生成的小姐姐动起来

总结:由于目前这个插件才刚开发出来不久,到现在也就才第二个版本,有一些已知bug,但是作为目前为数不多的文本转视频类工具,依旧拥有非常广阔的前景,相信在不久的将来,人人都可以通过文字来生成梦想的画面,期待作者的后续更新!

网盘链接:百度网盘 请输入提取码
提取码:cmjh

注:本文源自乾坤AI,作者:ai-world,更多内容请关注乾坤AI。
乾坤AI官网地址:https://qkunai.com

  • 1
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值