一文详解AI绘画打光神器 IC-Light模型!可控制光照方向和色彩氛围,免费使用!(附资料)

大家好,我是画画的小强

AI绘画 Controlnet、SD WebUI Forge 和 LayerDiffusion 的作者 lllyasviel 大神最近又推出了一个新的项目 IC-Light,可以实现控制一张图像的光照方向和色调氛围,今天一起我们了解一下它的特点及用法~

一、IC-Light 简介

IC-Light 项目主页: https://github.com/lllyasviel/IC-Light

IC-Light 是 “Imposing Consistent Light (营造一致的光线)” 的缩写,它是一个照明控制项目,目前支持通过文本和背景图对前景内容进行照明控制,使前景主体与背景环境光照一致,从而让二者融为一体。

在这里插入图片描述

从官方放出的截图中可以看出,IC-Light 可以对色调氛围和光照方向进行控制。如提示词写了 “窗外的阳光”,那么处理后的图像中人物身上就会有明显的光影,整体色调也会变成温暖的橘色;如果提示词写的霓虹灯光,则画面会变成暗调的红蓝光。光照方向则可以通过 Lighting Preference 选项来控制,支持左侧光、右侧光、底部光和顶部光。即使原图中的光影非常复杂,IC-Light 也可以重新进行打光。

在这里插入图片描述

在这里插入图片描述

二、使用方法

  1. ComfyUI

IC-Light 原生插件: https://github.com/huagetai/ComfyUI-Gaffer

模型下载: https://huggingface.co/lllyasviel/ic-light/tree/main

(注意:以上链接如无法下载,请看下方扫描免费获取插件或模型文件哦)

ComfyUI 目前已经有多个实现 IC-Light 的插件,此处我使用的是原生的插件 ComfyUI-Gaffer,我们可以通过 git clone 或者 comfyui manager 安装。
在这里插入图片描述

插件安装成功后,需要下载 3 种 IC-Light 模型 (模型文件请看文末扫描免费获取哦),安装到 ComfyUI/models/iclight 文件夹中,三种模型目前只适用于 SD 1.5 模型,作用分别为:

  1. iclight_sd15_fc.safetensors:默认的重照模式,以文本和前景为条件。您可以使用初始潜影来影响重照效果。在 FG 工作流程中使用它
  2. iclight_sd15_fcon.safetensors: 与 “iclight_sd15_fc.safetensors ”相同,但使用偏移噪声进行训练。在 FG 工作流程中使用它
  3. iclight_sd15_fbc.safetensors: 以文本、前景和背景为条件的重新照明模型。在 BG 工作流程中使用它

在这里插入图片描述
以上步骤完成后,重启 ComfyUI,然后从 ComfyUI Gaffer 插件根目录的 example 文件夹中导入官方给的 6 个工作流文件,然后就可以正常使用了。其中 IC-Light 节点的相关参数和用法在 ComfyUI Gaffer 的 Github 主页中有详细介绍,使用前可以先仔细阅读一下。6 个工作流的作用分别是:

① workflow-gaffer-iclight-fc-text:文本生成背景,修改给定前景的光照,使其融为一体。

在这里插入图片描述

② workflow-gaffer-iclight-fc:文本生成背景+手动设置 8 种光照方向,修改给定前景的光照,使其融为一体。
在这里插入图片描述
③ workflow-gaffer-iclight-fbc:上传给定背景,修改给定前景的光照,使其融为一体。

在这里插入图片描述

3. SD WebUI Forge

插件链接: https://github.com/huchenlei/sd-forge-ic-light

模型下载: https://huggingface.co/huchenlei/IC-Light-ldm/tree/main

(注意:以上链接如无法下载安装,请看文末扫描免费获取插件和模型文件哦)

除了 ComfyUI,SD WebUI Forge 也已经有了 IC-Light 的插件,可以在 「extension」中通过网址安装。然后下载 clight_sd15_fc_unet_ldm(用于前景)和 iclight_sd15_fbc_unet_ldm(用于背景)两个模型,安装到根目录的 stable-diffusion-webui-forge/models/unet(没有 unet 文件夹手动创建一个)。

在这里插入图片描述

SD WebUI Forge 中也支持从文本生成背景、控制照明方向和上传背景图对给定前景造成影响。需要注意的是:

  1. 如果是自己上传背景图,需要将照明模型又 FC 转为 FBC;
  2. CFG 数值要调低,一般为2;
  3. 控制光照方向时,插件为自动在图生图版块生成灰度图,此处的 CFG 同样要调整为2,重绘幅度要调高为1。

在这里插入图片描述

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

在这里插入图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述

若有侵权,请联系删除
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值