今天来讲一讲AI转绘,AI转绘就是将现有视频用AI绘画的方式绘制成新的视频。
传统的转绘需要将视频拆分,拆分成一帧一帧,然后再由AI转绘成想要的风格。(文末领籽料)
mov2mov是一款最早出现的SD动画插件之一,其工作原理是提取视频的帧,并根据用户设置的模型和提示词重新绘制每一帧。然后,它将生成的帧组合成一个新的视频,并输出结果。与SD自带的批量图生成功能相比,我更推荐使用mov2mov插件。因为使用mov2mov插件,您可以直接通过提示词来控制和生成最终的视频,省去了使用其他视频工具将多张图片转换为视频的繁琐过程。
01 mov2mov安装
mov2mov插件的安装与其他插件一样,我这里用的是秋叶的SD1.8,在扩展中输入mov2mov的git并安装。
git地址:
https://github.com/Scholar01/sd-webui-mov2mov
02配置如何修复
SD1.8版本更新后mov2mov作者大大还没来得及更新,会导致无法使用,生成按钮无法使用,在github的问题反馈栏issues有解决办法。见下图
通过网友的帮助,成功让mov2mov适配了SD1.8版本。这就是开源精神。出现了bug即使作者来不及修复,也会有人热心的修复问题。
03 接下来就是视频转绘了。
先准备好视频,用标签器为视频打上标签。
我这里找了一个台妹跳舞视频
生成了文生图的标签信息。
然后在文生图的正向信息中填入内容
下一步将参考视频放入框中
调整好 大模型对应的采样方法
以及生成视频的长宽信息
设定重绘幅度,越接近0则与原视频越相似,越接近1则越不同
设定好ControlNet的OpenPose
点击生成等待进度条读完
短短几秒,我这里用了20分钟。。。
01
作品如下
写在最后
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。