一、介绍
目前ComfyUI视频领域最好用的是混元视频,但是混元视频之前一直有个问题,就是图生视频一直没出来,最近我看新出的一个模型SkyReels,这个是在混元模型基础上训练的,支持在KJ大佬的混元插件里面使用,它支持图生视频。
SkyReels是昆仑万维2月18日号发布开源的,我们今天要用的是他们的图生视频的模型。
今天就来带大家体验一下效果,显存要求至少16-20G,太低的就不大行了。
二、相关安装
** 2.1 插件安装 **
这里用的是KJ大佬的混元插件 插件地址: https://github.com/kijai/ComfyUI-HunyuanVideoWrapper 任务管理器里面搜一下
** 2.2 模型安装 **
大模型选择kijai大佬的SkyReels模型,i2v的是图生视频,有bf16和fp8两种,显存不够的下载fp8,我这里使用bf16测试。
https://huggingface.co/Kijai/SkyReels-V1-Hunyuan_comfy/tree/main
除了最核心的这个模型外,还需要vae、clip、LLM三大模型 分别截图如下,文末网盘会全部提供
到此,模型准备就搞定了。
三、使用说明
完整工作流如下
需要调整的参数不多,图片和提示词编写即可,我设置绿色的2个节点就是需要调整的。
shyreels官方那边给出的设置建议是 544x960,97帧率。
我们先来看几个效果吧:
整体效果还可以,在开源里面算是不错的了,但是我因为限制了图像缩放,缩小到短边512的,所以可以看到最终画质是有点损失的,这个需要后期使用第三方工具来提高画质,我去研究下,有进展再开一篇和大家分享。
** 最后有几个注意点 **
目前我跑这个,一般是要6分钟才跑完2秒的图生视频,太慢了,我查了下,官方问题里面KJ有答复,说是CFG的问题
CFG可以自己调整,我最早是用官方默认的0.6,需要5-6分钟跑图, 现在改成0.1后,时间变成3-4分钟了,确实有影响,会快一些。
另外一个很关键的地方 HunyuanVideo Mdel Loader这个节点里面 attention_mode推荐使用最新的 sageattn_varlen
用 sageattn_varlen 的话,出视频速度会更快一些,质量也更好,安装这个有点小麻烦,这里说一下如何安装。
首先找到我们的 python 目录,一般就在我们的 ComfyUI 目录下,然后地址栏输入 cmd,敲回车。
除此之外,还需要安装 triton,这个稍微复杂一些,首先我们需要在以下链接中找到和我们的 python 版本对应的安装文件。
https://github.com/woct0rdho/triton-windows/releases/tag/v3.1.0-windows.post5
我这里是python310,那我们就下载对应的310文件,放到python目录下,如下图这样
然后回到我们刚才打开的 cmd 界面,输入以下的命令,敲回车进行安装。
python.exe -s -m pip install triton-3.1.0-cp310-cp310-win_amd64.whl
然后重启我们的 ComfyUI 就可以使用「sageattn_varlen」这个模式了。
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。
需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
