Stable Diffusion 制作无处不在的ikun动画教程

上次分享过了ikun的图片融合教程,今天来用stable diffusion来做【鸡你太美】的完整动画教程,需要用到一个插件来辅助,让你做完也可以在朋友圈装一波~

01

效果预览

02

准备条件

要制作这个视频效果,需要你满足以下2个条件

  • 一段ikun的【鸡你太美】的原版视频

  • 安装好controlnet插件,里面要有qrcode这个模型才行

  • isnet_Pro插件安装

03

插件安装

3.1 Controlnet插件安装

如果你是安装的秋叶整合包,里面就自带了controlnet插件了,如果没有的话

再安装一遍就行

扩展那边去安装,路径依次是

1:扩展-从网址安装

2:在扩展的git仓库网址输入

https://github.com/Mikubill/sd-webui-controlnet

下载后路径是在

\sd-webui-aki-v4.2\extensions

如果上传在扩展那边一直下载不成功,那就用最简单的方法,先安装好git工具

controlnet里面模型下载地址,包含了需要用到的qrcode模型

夸克网盘链接:

https://pan.quark.cn/s/7e347e998dea

3.2 isnet_Pro插件安装

isnet_Pro插件可以帮我们把视频切成帧图片,也可以把图片合成成视频,还可以生成简单的蒙版图,以及背景透明的图(适合主体和背景层次分明的),我们这边就用到了上述的这些功能。

下面介绍下怎么安装

插件官网:https://github.com/ClockZinc/sd-webui-IS-NET-pro

打开设置-从网址安装,输入下面这段安装即可,安装好了记得重启下webUi

https://github.com/ClockZinc/sd-webui-IS-NET-pro.git

04

实战流程步骤

这里整理下要制作上面完整AI动画的步骤

  • 用isnet_Pro的frame2video把视频切成每一帧

  • 用isnet_Pro的INSNETpro2生成透明背景的图

  • 文生图制作融合图效果

  • 锁定seed,批量出图

  • 图都出来后,在isnet_Pro中把帧图片合并成视频。

  • 在剪映中把原视频的声频提取出来,导入新视频,最终导出mp4即可

4.1 用isnet_Pro的frame2video把视频切成每一帧

首先先切换到安装好的isnet_Pro这个插件这边,在frame2video这边,先把视频切成每一帧,操作如下图所示

处理好了会生成如下这样图片

4.2 用isnet_Pro的INSNETpro2生成透明背景的图

生成好序列帧图片后,切换到 ISNETpro2这边,把刚才序列帧图片路径配置到输入地址,输出地址也配置一个,然后点击 开始批量生成按钮。

这样就生成了透明背景的图了,如下所示。

4.3 文生图,制作特效

这一步和之前制作ikun融合效果图一样,下面给出方案

正面词:

best quality,masterpiece,(photorealistic:1),ultra high res,highres,8k wallpaper,official art,(realistic:1.2),night,a bustling city,(vehicle passage:1.1),neon light,(lots of traffic:1.1),wide-angle view,aerial view,

负面词:

NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome0),((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbic d:1.21),(mutilated:1.21),(tranny:1.331),mutated hands,(poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra limbs,(disfigured:1.331),(missingarms:1.331),(extra legs:1.331),(fused fingers:1.61051),(toe omany fingers:1.61051),(uncleareyes:1.331),lowers, bad hands,missingfingers, extra digit,bad ha ands, missing fingers, ((extra arms and legs))),(humen,girl,man,boy:1.5)

controlnet这里,把刚才生成的透明背景图拿一张出来放上去,预处理不选择,模型选择control_v1p_sd15_qrcode_monster,权重选择1.7

多跑几张图看看效果,满意为止

4.4 锁定seed,批量出图

出到满意的图了,seed回填,然后contrlNet切换到批量处理,把刚才透明背景图的文件夹路径填入,就可以批量绘制了。这种方案是逐帧制作,所以比较费时间。

最终效果这样,把生成的图都拷贝到一个文件夹目录下,方便后面合并。

4.5 有问题的图排查重绘

如果出的图里面出现有问题的,需要重新生图,一个小技巧就是,把这张的透明原图继续拖到controlnet里面,然后其他参数都不变,只要把批量次数调整成3就行,这样出的3张图里面 基本可以有一张是正确。

4.6 合并成视频

素材都弄完了,接下来就是要合并成视频了,打开isnet_Pro的video2frame,配置好图片输入地址以及视频输出地址,点击合并即可。

合成后控制台会输出

目录下面也出现了生成好的视频,这种生成的视频是没有声音的。

4.7 剪映中处理视频

打开剪映,先导入原视频把音频分离出来,然后再导入制作好的视频,再配合上次推荐的模板就可以实现一个完整的效果视频了。

05

总结

这就是制作ikun的鸡你太美打球视频的AI动画效果图完整教程,制作过程不难,就是太吃电脑显卡配置了,15秒的视频按30帧切图再重绘的话,要重绘400多张图。每一帧都是你心爱的鸽鸽。


写在最后

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

在这里插入图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述

若有侵权,请联系删除
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值