前言
对 AIGC 技术感兴趣,加个关注,保持联系:
ComfyUI 是 Stable Diffusion 的一个基于节点组装绘图流程的图形用户界面(GUI)。通过将不同的节点
连接在一起,你可以在 ComfyUI 中构建图像生成工作流
。一个完整的工作流看起来像下面这样:
ComfyUI 工作流的样子
所有的AI设计工具,安装包、模型和插件,都已经整理好了,👇获取~
这篇教程我们来介绍一下如何在 ComfyUI 中使用 LoRA
。
1、简介
LoRA
是一种可以对 Checkpoint 模型进行微调的小模型,它经常用于修改绘图风格或将人物形象注入模型。
在 ComfyUI 中我们可以清晰的看到 LoRA 如何对 Checkpoint 模型进行微调:
ComfyUI 中的 LoRA 节点
可以看到,LoRA 模型更改了 Checkpoint 模型的 MODEL
和 CLIP
,但未触及 VAE
。
2、简单的 LoRA 工作流
一个简单的 LoRA 工作流可能是这样的:Checkpoint 模型搭配 LoRA 模型的文本到图像工作流。
LoRA 工作流
你可以下载上面这个简单的 LoRA 工作流图片,将其拖入到 ComfyUI 中来加载。
接下来,你可以这样使用这个工作流:
-
1、选择一个
Checkpoint
模型。 -
2、选择一个
LoRA
模型。 -
3、修改
提示词
和负向提示词
。 -
4、单击
Queue Prompt
。
3、多个 LoRA
你可以在同一个文本到图像工作流中使用两个或更多个 LoRA。
两个 LoRA 工作流
你可以下载上面这个使用两个 LoRA 的工作流图片,将其拖入到 ComfyUI 中来加载。
使用它的流程与一个 LoRA 工作流类似,但现在你需要选择两个 LoRA 模型。
两个 LoRA 时一个接一个地应用。
为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取
一、ComfyUI配置指南
- 报错指南
- 环境配置
- 脚本更新
- 后记
- …
二、ComfyUI基础入门
- 软件安装篇
- 插件安装篇
- …
三、 ComfyUI工作流节点/底层逻辑详解
- ComfyUI 基础概念理解
- Stable diffusion 工作原理
- 工作流底层逻辑
- 必备插件补全
- …
四、ComfyUI节点技巧进阶/多模型串联
- 节点进阶详解
- 提词技巧精通
- 多模型节点串联
- …
五、ComfyUI遮罩修改重绘/Inpenting模块详解
- 图像分辨率
- 姿势
- …
六、ComfyUI超实用SDXL工作流手把手搭建
- Refined模型
- SDXL风格化提示词
- SDXL工作流搭建
- …
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取