一、对原视频进行处理(剪影)
1.1 将视频界面人物放大居中。
1.2 拍原视频不要运镜,有运镜的部分会影响生成效果,需要重新处理。
1.3 将原始视频降为24帧,转换的动画风格一般设定为8帧。
二、设置工作流
2.1 加载视频路径
参数参考
三、安装相关节点、模型
ComfyUI Nodes for Inference.Core
https://github.com/LykosAI/ComfyUI-Inference-Core-Nodes
推理的主要节点,核心和稳定性矩阵。重点是不影响启动性能,并使用完全限定的节点名称。
下载后如图:
ComfyUI Essentials
https://github.com/cubiq/ComfyUI_essentials
ComfyUI核心中奇怪地缺少的基本节点。除了少数例外,它们是新功能,而不是商品。我希望这只是一个临时存储库,直到节点被包括在ComfyUI中。
ComfyUI-Advanced-ControlNet
https://github.com/Kosinkadink/ComfyUI-Advanced-ControlNet
节点:ControlNetLoaderAdvanced、DiffControlNetLoader Advanced、ScaledSoftControlNetWeights、SoftControlNetWweights、CustomControlNetWeight、SoftT2IAdapterWeights、CustomT2IAdapter Weights
Fizz节点
https://github.com/FizzleDorf/ComfyUI_FizzNodes
动画和实用程序的预定提示、预定float/int值和波形函数节点。兼容帧同步和关键帧字符串生成器,用于Comfyui中的音频同步动画。
Efficiency Nodes for ComfyUI Version 2.0+
https://github.com/jags111/efficiency-nodes-comfyui
注意:该节点最初由 LucianoCirino 创建,但原始存储库不再维护,并已由新维护者分叉。要使用分叉版本,您应该卸载原始版本并重新安装此版本。
ComfyUI Frame Interpolation
https://github.com/Fannovel16/ComfyUI-Frame-Interpolation
节点:KSampler 逐渐添加更多降噪(高效)
ComfyUI’s ControlNet Auxiliary Preprocessors
基于 ControlNet 辅助模型对 comfyui_controlnet_preprocessors 的重写。我认为旧的回购协议不足以维护。所有旧的工作流程仍然适用于此存储库,但版本选项不会执行任何操作。几乎所有 v1 预处理器都被 v1.1 取代,除了 v1.1 中未出现的预处理器。
https://github.com/Fannovel16/comfyui_controlnet_aux
v3_sd15_adapter.ckpt
https://github.com/guoyww/AnimateDiff
运行结果
显存8G,运算能力不足,
后一部分的controlnet无法运行
两次controlnet 效果不理想
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。
需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
