ComfyUI 第四节 从裁剪到重绘,完整图生图工作流搭建

218 篇文章 4 订阅

今天我们继续更新 ComfyUI 的基础内容,这篇内容主要会包含 图生图的裁剪缩放重绘 以及 提示词反推 的玩法

图生图直出

启动 ComfyUI ,先加载一个默认的工作流

图片

前面的课程在讲 文生图 时,需要构造一个空的潜空间作为参数传入到采样器中

图片

那对于图生图来说,和文生图的区别就在于需要传入一张图片,将图片编码输入到潜空间中

新建节点-图像-加载图像,上传一张图像

图片

这个只是加载了一张图片,我们还需要将像素空间的图片进行编码传入到采样器中

新建节点-Latent-VAE编码

图片

最后生成图片

图片左边是原图,右边是出图

直接就炸图了,因为图片尺寸太大,图片和原图没有什么关系~一点也不像

当然,只有出图的尺寸参考了原图

我们回想一下,在 WebUI 中是不是还需要通过重绘幅度来控制出图测重绘效果呢?

在 ComfyUI 中也是一样,我们需要设置采样器中的 降噪 参数,设置到 0.5-0.8 之间,效果能好一些

把已有的图像特征放进去再去做去燥迭代,0.8 就是我们跳过 20%的步数,剩余 80%的步数在原有图像噪点上进行文生图

参数越大,也就意味着基本上就是按照提示词来生成的新图了

降噪设置为 0.6,看看效果

图片左边是原图,右边是出图

裁剪、缩放

根据上面的这个直出工作流,会发现没有任何地方能够设置尺寸的地方

裁剪

ComfyUI 默认提供了有裁剪的节点,新建节点-图像-变换-图像裁剪

图片

它有四个参数,从哪个坐标点(x,y)开始裁剪,要裁剪的出图宽高是多少

缩放

先来看看默认提供的缩放节点,新建节点-图像-放大-图像缩放图片

会发现这样直接裁剪的效果并不好,得知道原图的尺寸,才能比较好的设置裁剪的宽高

如果设置 裁剪方式 为 disable(直接拉伸),出图就会按设置的尺寸进行拉伸

它有个一个参数是 center ,也就是居中裁剪,看看效果

图片

不管是那哪种都挺费事~

其实我们想要的是设置宽或者高,能够自动按比例进行裁剪,不要出现拉伸

这个时候我们就需要安装一个插件 derfuu ,安装包后台回复 插件 获取,下载后解压到ComfyUI/custom_nodes 下,重启刷新 ComfyUI 页面

安装成功之后,新建节点-Derfu节点(Derfu_Nodes)——自设节点——图像-图像按边放大

图片

这样出图效果就很不错了,非常智能的按比例进行缩放了

重绘

重绘简单来说就是给原图上面画一个遮罩,对遮罩或非遮罩的内容进行二次重绘的过程

重绘相对于图生图来说需要额外在加一个遮罩的图作为输入,所以原有的 VAE编码器 节点的输入就不够用了``新建节点-Latent-内补- VAE内补编码`

如果没有画遮罩的情况,就相当图生图了

我们来添加点遮罩,右键加载图像的这个节点,然后把眼睛画上遮罩

图片

接着调整提示词,将提示词改为 red eye,重绘遮罩区域。

图片

这个效果还是挺有意思的,还有黑眼圈了~

(黑眼圈是因为 设置的遮罩延展为6导致的,相当于是羽化程度了,你可以设置的更小一些

除了在原图上面画遮罩,我们还可以上传一个遮罩图片进行重绘

图片

提示词反推

在 webui 中经常会有的一个场景,拿到一张图片放到提示词反推中,然后复制提示词到填写框中。。

没错需要手动操作、操作!

在 ComfyUI 中这一切就只需要一个连线就可以解决的

先安装 WD14提示词反推 插件,后台回复插件

1. 创建提示词反推节点

新建节点-图像- WD提示词反推,将图片接入到 提示词反推节点

图片

2. 输出提示词结果

对于采样器来说,输入的不管是提示词还是图片,都需要进行编码传入到潜空间中

通过提示词反推出来的依然是字符串文字,所以还需要新建一个 CLIP文本编码器 进行转换 新建节点-条件- CLIP文本编码器

接着右键 CLIP文本编码器 节点,选择 转换文本为输入 选项,连接提示词反推节点,其它的参数就和 webui 一样了

图片

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

一、ComfyUI配置指南

  • 报错指南
  • 环境配置
  • 脚本更新
  • 后记

img

二、ComfyUI基础入门

  • 软件安装篇
  • 插件安装篇

img

三、 ComfyUI工作流节点/底层逻辑详解

  • ComfyUI 基础概念理解
  • Stable diffusion 工作原理
  • 工作流底层逻辑
  • 必备插件补全

img

四、ComfyUI节点技巧进阶/多模型串联

  • 节点进阶详解
  • 提词技巧精通
  • 多模型节点串联

img

五、ComfyUI遮罩修改重绘/Inpenting模块详解

  • 图像分辨率
  • 姿势

img

六、ComfyUI超实用SDXL工作流手把手搭建

  • Refined模型
  • SDXL风格化提示词
  • SDXL工作流搭建

img

img

这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值