前言
本节我们介绍ComfyUI插件和Lora的下载及使用方式。
1. 安装
1.1 Checkpoint安装
将从前面介绍的模型下载平台下载后,放在ComfyUI/models/checkpoints文件夹下。
1.2 Lora安装
在前面介绍的模型下载网站下载Lora模型,然后放在ComfyUI/models/loras文件夹下。
所有的AI设计工具,安装包、模型和插件,都已经整理好了,👇获取~
1.3 插件安装
插件一般可从github或其他网站下载,一般有三种方式:
1. 直接下载github源码解压自ComfyUI/custom_nodes
2. 用github的方式下载自ComfyUI/custom_nodes
3. 使用ComfyUI管理插件安装
核心思想是将代码放在ComfyUI/custom_nodes
2.下载
方法1:在github或gitee平台通过搜索ComfyUI可以搜索到插件,但是需要自己过滤加筛选。
方法2:搜索引擎
方法3:通过插件ComfyUI-manager下载。
打开方式:manager->Custom Nodes Manger
3. 插件推荐
特别注意ComfyUI的插件是大多是通过工作流的方式进行使用,相对WebUI而言非常不直观,且使用复杂,插件之间的功能也容易冗余。故不推荐一次性安装过多的插件,可以先安装最基本的插件,后续根据需要一个一个安装使用。下面推荐几款我自己最长的插件及其基本功能:
3.1 ComfyUI-manager
介绍:最基础的插件,基本功能包括:插件管理(插件的安装、更新);模型安装(支持多种类型的模型Checkpoint、LoRA、VAE等模型的安装。
安装方法:如前文介绍(这里需要注意ComfyUI-manager安装后会依赖于git,所以安装之前需要先安装git)(安装后需要重启)
使用:
安装之后要想打开狐狸图标(表示该节点是ComfyUI提供的节点)即可如上图进行设置。
如果想要下载插件可点击上图Custom Nodes Manager或Install Missing Custom Nodes。然后在filter中选择All。
就可以看到全部插件及介绍了。
3.2 ComfyUI workspace Manager
介绍:工作流管理插件。提供工作流的保存、加载等操作。
安装方式:通过上面的Manager进行安装,也可以git安装。
使用:主要的功能就是进行工作流管理,会在ComfyUI文件夹下面新建一个my_workflows文件夹。
3.3 other
目前ComfyUI的插件已经上千种,其中很多都会存在功能重复,所以在选择插件的时候要注意筛选,可以看大佬推荐的、也可以看使用人数多的。
再介绍几款好用的插件:
AlekPet:翻译提示词插件
Crystools:CPU和GPU信息的实时反馈
还有更多插件的功能就等着大家去探索了!
4. Lora使用
Lora作为大模型微调的一种方式,在文生图领域可以调节图片风格和细节等。
前面我们已经介绍了Lora的下载和安装,这里主要介绍它的使用。
思想:Lora可以理解为是在基础模型的基础上再增加了一些参数或对某些参数进行了修改,所以它应该要和基础模型放在一块儿,及连接在checkpoint后面。
方法:工作流界面右键,然后进行如下选择。
下面 看看效果
可以和不用lora对比一下效果。
变化还是很大的。
如果你喜欢我的内容,欢迎关注,我会持续更新ComfyUI和其他大模型应用的实操。
为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取
一、ComfyUI配置指南
- 报错指南
- 环境配置
- 脚本更新
- 后记
- …
二、ComfyUI基础入门
- 软件安装篇
- 插件安装篇
- …
三、 ComfyUI工作流节点/底层逻辑详解
- ComfyUI 基础概念理解
- Stable diffusion 工作原理
- 工作流底层逻辑
- 必备插件补全
- …
四、ComfyUI节点技巧进阶/多模型串联
- 节点进阶详解
- 提词技巧精通
- 多模型节点串联
- …
五、ComfyUI遮罩修改重绘/Inpenting模块详解
- 图像分辨率
- 姿势
- …
六、ComfyUI超实用SDXL工作流手把手搭建
- Refined模型
- SDXL风格化提示词
- SDXL工作流搭建
- …
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取