今天我们继续更新 ComfyUI 的基础内容,这篇内容主要会包含 图生图的裁剪、缩放、重绘 以及 提示词反推 的玩法
图生图直出
启动 ComfyUI ,先加载一个默认的工作流
前面的课程在讲 文生图 时,需要构造一个空的潜空间作为参数传入到采样器中
那对于图生图来说,和文生图的区别就在于需要传入一张图片,将图片编码输入到潜空间中
新建节点-图像-加载图像
,上传一张图像
这个只是加载了一张图片,我们还需要将像素空间的图片进行编码传入到采样器中
新建节点-Latent-VAE编码
最后生成图片
左边是原图,右边是出图
直接就炸图了,因为图片尺寸太大,图片和原图没有什么关系~一点也不像
当然,只有出图的尺寸参考了原图
我们回想一下,在 WebUI 中是不是还需要通过重绘幅度来控制出图测重绘效果呢?
在 ComfyUI 中也是一样,我们需要设置采样器中的 降噪 参数,设置到 0.5-0.8 之间,效果能好一些
“
把已有的图像特征放进去再去做去燥迭代,0.8 就是我们跳过 20%的步数,剩余 80%的步数在原有图像噪点上进行文生图
”
参数越大,也就意味着基本上就是按照提示词来生成的新图了
将降噪设置为 0.6,看看效果
左边是原图,右边是出图
裁剪、缩放
根据上面的这个直出工作流,会发现没有任何地方能够设置尺寸的地方
裁剪
ComfyUI 默认提供了有裁剪的节点,新建节点-图像-变换-图像裁剪
它有四个参数,从哪个坐标点(x,y)开始裁剪,要裁剪的出图宽高是多少
缩放
先来看看默认提供的缩放节点,新建节点-图像-放大-图像缩放
会发现这样直接裁剪的效果并不好,得知道原图的尺寸,才能比较好的设置裁剪的宽高
如果设置 裁剪方式 为 disable
(直接拉伸),出图就会按设置的尺寸进行拉伸
它有个一个参数是 center
,也就是居中裁剪,看看效果
不管是那哪种都挺费事~
其实我们想要的是设置宽或者高,能够自动按比例进行裁剪,不要出现拉伸
这个时候我们就需要安装一个插件 derfuu
,安装包后台回复 插件
获取,下载后解压到ComfyUI/custom_nodes
下,重启刷新 ComfyUI 页面
安装成功之后,新建节点-Derfu节点(Derfu_Nodes)——自设节点——图像-图像按边放大
这样出图效果就很不错了,非常智能的按比例进行缩放了
重绘
重绘简单来说就是给原图上面画一个遮罩,对遮罩或非遮罩的内容进行二次重绘的过程
重绘相对于图生图来说需要额外在加一个遮罩的图作为输入,所以原有的 VAE编码器 节点的输入就不够用了``新建节点-Latent-内补- VAE内补编码`
如果没有画遮罩的情况,就相当图生图了
我们来添加点遮罩,右键加载图像的这个节点,然后把眼睛画上遮罩
接着调整提示词,将提示词改为 red eye
,重绘遮罩区域。
这个效果还是挺有意思的,还有黑眼圈了~
(黑眼圈是因为 设置的遮罩延展为6导致的,相当于是羽化程度了,你可以设置的更小一些
除了在原图上面画遮罩,我们还可以上传一个遮罩图片进行重绘
提示词反推
在 webui 中经常会有的一个场景,拿到一张图片放到提示词反推中,然后复制提示词到填写框中。。
没错需要手动操作、操作!
在 ComfyUI 中这一切就只需要一个连线就可以解决的
先安装 WD14提示词反推
插件,后台回复插件
1. 创建提示词反推节点
新建节点-图像- WD提示词反推
,将图片接入到 提示词反推节点
2. 输出提示词结果
对于采样器来说,输入的不管是提示词还是图片,都需要进行编码传入到潜空间中
通过提示词反推出来的依然是字符串文字,所以还需要新建一个 CLIP文本编码器
进行转换 新建节点-条件- CLIP文本编码器
接着右键 CLIP文本编码器 节点,选择 转换文本为输入 选项,连接提示词反推节点,其它的参数就和 webui 一样了
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。
需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
一、ComfyUI配置指南
- 报错指南
- 环境配置
- 脚本更新
- 后记
- …
二、ComfyUI基础入门
- 软件安装篇
- 插件安装篇
- …
三、 ComfyUI工作流节点/底层逻辑详解
- ComfyUI 基础概念理解
- Stable diffusion 工作原理
- 工作流底层逻辑
- 必备插件补全
- …
四、ComfyUI节点技巧进阶/多模型串联
- 节点进阶详解
- 提词技巧精通
- 多模型节点串联
- …
五、ComfyUI遮罩修改重绘/Inpenting模块详解
- 图像分辨率
- 姿势
- …
六、ComfyUI超实用SDXL工作流手把手搭建
- Refined模型
- SDXL风格化提示词
- SDXL工作流搭建
- …
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】