前言
快手开源的可图Kolors作为当前唯一能在图片中生成中文的模型已经加入了Comfyui生态,我们可以本地部署,不用在忍受官方网页生成带有水印的图片了。
Kolors本身模型并不大,只有5G多。但是它采用了跟以往SD模型不同的文本编码器,整个安装文件加起来超过16G。这个以开源大语言模型ChatGLM3为基础的文本编码器也是支持Kolors中文输入的原因。Comfyui运行Kolors建议8G以上显存,最好12G以上。
所有的AI设计工具,模型和插件,都已经整理好了,👇获取~
下面我们来一步一步讲解怎么在Comfyui中安装Kolors。
一、在Comfyui中安装插件
首先要在github.com/kijai/ComfyUI-KwaiKolorsWrapper中下载Comfyui的Kolors插件。
可以通过Comfyui管理器安装,或者在Comfyui的custom_nodes下git clone。最简单的当然是通过我文后的分享网盘下载后解压到custom_nodes目录。
二、安装环境
插件安装好后,需要安装环境依赖,否则会报错。
这里只说Comfyui便携版(在 ComfyUI_windows_portable 文件夹中运行的)。进入python_embeded目录下打开命令行,输入:
python.exe -m pip install -r C:\ComfyUI_windows_portable\ComfyUI\custom_nodes\ComfyUI-KwaiKolorsWrapper\requirements.txt
文件夹位置不同的自己要改一下。
三、下载模型
启动Comfyui后加载分享的Kolors工作流,然后在Load Kolors Model节点选择FP16。
在Load ChatGLM3 Model节点选FP16,这里已经说明了12G以上显存选择FP16,8G的选quant8,4G的选择quant4。
这里的q8,q4相当于精简量化版,越小的对文本提示的理解越弱,出图效果越差。
选好后直接运行Queue Prompt,Comfyui会自动下载模型,保持网络畅通就好(提前加魔法)。
四、可能面临的问题
我文后分享了Kolors的模型、Comyfui插件和工作流。插件解压放到前面讲的custom_nodes文件夹里。
模型文件解压放到ComfyUI\models\diffusers文件里。
如果直接加载工作流还是报错缺少模型文件,就需要删掉先解压的模型文件,让插件自动下载。
有朋友说16G都爆显存,那么可能是没有安装xformers。这个网上讲怎么安装的很多,主要就是安装下载的xformers的软件,然后设置一下Windows环境配置路径。
实测中英文提示词几乎一样的效果。
长河落日圆,大漠孤烟直。
一个古罗马奴隶市场,一个的漂亮的波斯年轻女性在售卖自己,手里举着木牌,上面写着“买我”的文字,丰满,有大理石雕像和熙熙攘攘的人群。艺术风格灵感来自Lawrence Alma Tadema,色彩丰富、暖色,细节古典,中心构图,肖像。
晚来一阵风兼雨,洗尽炎光。理罢笙簧,却对菱花淡淡妆。绛绡缕薄冰肌莹,雪腻酥香。笑语檀郎:今夜纱厨枕簟凉。
梦里不知天在水,满船清梦压星河。
玉炉冰簟鸳鸯锦,粉融香汗流山枕。帘外辘轳声,敛眉含笑惊。柳阴轻漠漠,低鬓蝉钗落。须作一生拚,尽君今日欢。
上苑桃花朝日明,兰闺艳妾动春情。井上新桃偷面色,檐边嫩柳学身轻。花中来去看舞蝶,树上长短听啼莺。林下何须远借问,出众风流旧有名。
以上提示词仅供参考,你懂的,最后说一下,这个是SFW模型。
为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取
一、ComfyUI配置指南
- 报错指南
- 环境配置
- 脚本更新
- 后记
- …
二、ComfyUI基础入门
- 软件安装篇
- 插件安装篇
- …
三、 ComfyUI工作流节点/底层逻辑详解
- ComfyUI 基础概念理解
- Stable diffusion 工作原理
- 工作流底层逻辑
- 必备插件补全
- …
四、ComfyUI节点技巧进阶/多模型串联
- 节点进阶详解
- 提词技巧精通
- 多模型节点串联
- …
五、ComfyUI遮罩修改重绘/Inpenting模块详解
- 图像分辨率
- 姿势
- …
六、ComfyUI超实用SDXL工作流手把手搭建
- Refined模型
- SDXL风格化提示词
- SDXL工作流搭建
- …
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取