让AI学会打光,从此利好电商(Stable Diffusion进阶篇:Imposing Consistent Light)

前言

**(本篇是用Comfy UI进行IC-Light的操作,看看就好,ComfyUI的IC-Light目前不是最优选)
**

在前两篇笔记中分别使用本地部署和Forge UI的方式进行IC-Light的操作,想必看过前两篇笔记的小伙伴对这个调光的操作流程和大概的原理已经理解了。

但是比起Forge UI和本地部署,大部分学习stable diffusion的小伙伴应该会更多选择ComfyUI和WebUI。目前IC-Light扩展可以添加到WebUI上,但是好像模型调用方面还有点问题,所以今天的文章还是先了解一下如何在Comfy UI使用IC-Light。

先说一下,ComfyUI时不时会出现一些节点问题我还没能解决,这几天一直在捣鼓这些,所以这篇文章我写得头昏眼花希望大家见谅。

所有的AI设计工具,模型和插件,都已经整理好了,👇获取~在这里插入图片描述

IC-Light的下载安装

有两个不同的节点包可以在ComfyUI中安装IC-Light,一个是kijai大佬的节点包:

https://github.com/kijai/ComfyUI-IC-Light

另一个是huchenlei大佬的节点包:

https://github.com/huchenlei/ComfyUI-IC-Light-Native

这两个节点都可以通过Manager安装后在自定义节点文件夹里找到示例的工作流。

关于ComfyUI的安装可以看这篇笔记:

什么!还有高手?(AI绘画:ComfyUI的基本安装和使用)

下载方式也很简单,打开ComfyUI后点击Manager,然后在网址部分输入上述的两个地址。

根据页面提示下载重启后来到ComfyUI的根目录可以发现有刚好下载好的两个文件夹。

点开任意一个后里面有一些example,这些就是可以直接拖拽进ComfyUI中的工作流。

在工作流拖拽到ComfyUI中可以看到有些缺失的地方,这里直接去Manager中寻找缺失节点即可。

在下载完之后会有提示,直接点击最下方的重启即可。

如果有些nodes提示下载失败,则可用URL下载的方法,操作也很简单:

点击这个页面会跳转到该nodes的github仓库,然后将仓库的网址复制粘贴到这个提示框中:

之后再点击重启即可。

IC-Light的操作

在ComfyUI中的操作其实和前面两篇笔记中的操作是大差不差的:

这里我导入的是上面下载的节点包中的工作流:

使用这个工作流要注意的就是加载模型的这个节点记得选用和导入的图片风格类似的大模型,二次元就选二次元,真人风格就选真人风格。

这样调整完之后就可以使用啦!

除此之外开发者也提供了三种不同的进阶工作流,其中有一个工作流标有lightmap,这个节点可以用来生成光线贴图。

所谓的光线贴图就是像上一篇笔记中讲的控制AI生成光照的区域,但是这个默认节点只能生成左侧和右侧的光照。意思就是当AI生成图之后,太阳光等光影效果只会出现在画面的左侧或者右侧。

如果要和之前的笔记一样可以自由控制光线的话,那可以额外加一个Load Image节点。并且为了保证光线贴图能够贴合上传图片的尺寸,还需要再加一个image rezise的节点。

如果在运行的过程中这个节点出现了问题:

解决方法也很简单,来到根目录中名为unet的文件夹中,然后将在Hugging face下载的两个文件放在这里。

https://huggingface.co/huchenlei/IC-Light-ldm/tree/main

在Load Diffusion Model的unet_name选项那里选择fc_unet的这个选项。

当然,可能会有小伙伴遇到这个问题,是Ksampler节点出现了问题:

这个问题困扰了我两天,我已经去发帖子询问了,如果有解决方法后续我会再进行补充的。

而另外两个节点也有一些优化措施,例如这个名为preserve_color(颜色保留)的节点

通过在生成Latent图像的时候部分置入主体区域像素,来做到更好地保持主体颜色,比较适合在采样过程中主体产生了较大色差时使用。

另一个Detailed_transfer(细节迁移)

则是在最终输出环节前加入了一层图像处理节点,让主体上的部分高频细节得到了保留。

素材来源:Nenly同学

IC-Light的出现一定程度上帮助了很多摄影后期甚至是电商的小伙伴,目前市面上已经有不少基于IC-light开发的AI摄影、电商出图等的工作流。

当然,以后还会有越来越多更加成熟的技术出现,我也在期待着那一天的到来。

这里分享给大家一份Adobe大神整理的《AIGC全家桶学习笔记》,相信大家会对AIGC有着更深入、更系统的理解。

有需要的朋友,可以点击下方免费领取!

在这里插入图片描述

AIGC所有方向的学习路线思维导图

这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。如果下面这个学习路线能帮助大家将AI利用到自身工作上去,那么我的使命也就完成了:
在这里插入图片描述

AIGC工具库

AIGC工具库是一个利用人工智能技术来生成应用程序的代码和内容的工具集合,通过使用AIGC工具库,能更加快速,准确的辅助我们学习AIGC
在这里插入图片描述

有需要的朋友,可以点击下方卡片免费领取!

在这里插入图片描述

精品AIGC学习书籍手册

书籍阅读永不过时,阅读AIGC经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验,结合自身案例融会贯通。

在这里插入图片描述

AI绘画视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,科学有趣才能更方便的学习下去。

在这里插入图片描述

  • 13
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值