ComfyUI-InstantID-ComfyUI下的非官方InstantID实现
ComfyUI InstantID是对InstantID的非官方实现,支持本地和huggingface hub模型,同时支持通用styler。它包括基础模型加载、InsightFace模型加载、ID ControlNet模型加载、Ipadapter_instantid模型加载、提示词+风格、InstantID生成、风格安装、使用方法、工作流、更新日志和速度实测等功能。用户可以通过ComfyUI Manager安装或手动安装,然后根据指引下载所需的模型并填入相应节点中进行使用。
Lumiere-视频生成的时空扩散模型
Lumiere是一个由谷歌研究院开发的时空扩散模型,旨在合成具有逼真、多样和连贯动作的视频。该模型引入了一种称为空间时间U-Net的架构,通过一次传递生成整个视频的整个时间段,从而与现有的视频模型形成鲜明对比。此外,Lumiere通过同时部署空间和时间下采样和上采样,并利用预训练的文本到图像扩散模型,学会了通过多个时空尺度处理全帧速率、低分辨率视频。实验结果展示了最先进的文本到视频生成结果,并表明该模型