ComfyUI InstantID(原生支持)技术文档
ComfyUI_InstantID 项目地址: https://gitcode.com/gh_mirrors/co/ComfyUI_InstantID
本篇文档旨在为您提供详尽的指导,以帮助您了解并有效使用ComfyUI中的 InstantID 原生扩展。该扩展通过原生实现而非依赖diffusers,实现了与ComfyUI的无缝集成。
安装指南
- 确保ComfyUI已升级至最新版本。
- 将本仓库通过下载或执行
git clone
命令拷贝到您的ComfyUI/custom_nodes/
目录下,或者利用Manager工具进行安装。 - 需要安装额外库:
insightface
,onnxruntime
, 和onnxruntime-gpu
。您可以使用pip命令进行安装:pip install insightface onnxruntime onnxruntime-gpu
- 下载antelopev2模型,存放于
ComfyUI/models/insightface/models/antelopev2
路径下。- 可从提供的Google Drive链接或Hugging Face获取模型文件。
- 主模型文件(
ip-adapter.bin
)需从HuggingFace下载,并存放在ComfyUI/models/instantid/
中。 - 控制网模型从HuggingFace下载,放置于ComfyUI的控制网目录内。
- 注意:当前仅适用于SDXL环境。
使用说明
- 基础工作流程:参照
examples
目录内的基本示例进行操作。 - 降低CFG值:为了得到理想结果,推荐将CFG设置为4或5,或利用
RescaleCFG
节点调整。 - 避免水印:若生成图中出现水印,考虑使用非标准分辨率,如1016x1016。
- 关键点应用:可以通过
image_kps
输入更换参考图像的姿势。
API使用文档
- Apply InstantID节点:自动注入35%噪声到负向嵌入中,用于减少“烧伤”效果并提高相似度。
- 高级InstantID节点:允许分别设置InstantID模型与控制网权重,以及自定义噪声注入比例,提供更精细调整选项。
其他特性
- 多ID支持:虽然较为复杂且生成速度较慢,样例目录中提供了相关工作流程。
- 控制网结合:可以添加其他控制网,例如深度控制网,具体示例在
examples
中。 - 风格化:借助IPAdapter对生成进行风格化处理,例子见文档内图片展示。
注意事项
与SDXL Turbo/Lighting配合效果最佳,社区检查点可获得最优成果。
本文档为Markdown格式,按照上述步骤,您应能成功安装并有效运用ComfyUI的InstantID原生扩展。记得感谢赞助者,他们的贡献使得开源软件得以持续发展。
ComfyUI_InstantID 项目地址: https://gitcode.com/gh_mirrors/co/ComfyUI_InstantID