在 Stable Diffusion 中控制光线的三种方式！

前言

在 Stable Diffusion 中控制光线的三种方式

在 Stable Diffusion Art 网站上看到一片关于在 Stable Diffusion 中如何控制光线的网站，感觉讲的很通俗易懂，做个翻译。

光线在摄影中扮演着至关重要的角色，并对图像的整体质量和意境产生重要影响。你可以利用光线来增强主题，创造深度和立体感，传达情感，并突出重要细节。

在本文中，你将了解通过以下方法来控制光线：

• 光线提示词

• 区域光线控制

• ControlNet img2img

所有的AI设计工具，模型和插件，都已经整理好了，👇获取~

软件#

我们将使用 AUTOMATIC1111 的 Stable Diffusion GUI 来进行图片生成。你可以在 Google Colab、Windows 或者 Mac 上使用这个 GUI。

使用光线提示词#

最简单的方法是将 光线提示词 添加到提示中。

我将使用以下基本提示和负面提示来说明效果。

fashion photography, a woman

disfigured, ugly, bad, immature, cartoon, anime, 3d, painting, b&w, nsfw

• Model: DreamShaper v6 (c249d7853b)

• Width: 512

• Height: 768

• CFG scale: 7

• Seed: 94858136 – 94858143

使用基本提示生成的示例图像。它们的光线充足，外形美观，但照明效果并不有趣。

Volumetric lighting（立体光线）是指图像上的明显光线束。在摄影中，它被用于增加体积感。

向提示中添加提示词 volumetric：

使用 Rim lighting（边缘光线）为主体添加了一个发亮的轮廓。这可能会使主体变暗。你可以与其他光线提示词结合使用以突出主体。

向提示中添加提示词 rim lighting：

使用 Sunlight（阳光）在图像中添加阳光效果。它通常用于渲染大自然背景。

向提示中添加提示词 sunlight：

Backlight（背光）会将光源放在图片主体后面。通过添加这个提示词，你可以产生一些时尚的效果。

向提示中添加 backlight：

众所周知，Stable Diffusion 不会无人指导地生成暗图像。解决这个问题的方法有很多，包括使用模型和 LoRA。但一个更简单的方法是添加一些昏暗的光线提示词。

向提示中添加 dimly lit：

Crepuscular rays（晨光射线）用于添加光线穿过云层，产生的光线效果。它可以创造出令人惊叹的视觉效果。

该提示和纵横比通常用于生成全身图像，添加 crepuscular rays 会放大图像。我使用 crepuscular rays, face 略微放大了面部。

提示：

• 如果未看到效果，请增加提示词的权重。

• 这些光线提示词并不总是有效的。尝试一次生成几张图像进行测试。

区域光线控制#

提示中的光线提示词适用于整个图像。你可以使用工具进一步调整光线效果以适应特定区域。

你需要安装 Regional Prompter 扩展。请查阅文章以了解安装说明。

在这个例子中，你将为图像的上部和下部应用不同的光线。

在 txt2img 页面上，展开 Regional Prompter 部分。

• Active: Yes

• Use common prompt: Yes

• Split mode: Vertical

• Divide Ratio: 2,3

点击 visualize and make template，确认图像被分为两个垂直区域。

输入提示：

fashion photography, a woman
BREAK
( hard light:1.2), (volumetric:1.2), well-lit
BREAK
(dimly lit:1.4)

并使用下面的负面提示：

disfigured, ugly, bad, immature, cartoon, anime, 3d, painting, b&w, nsfw

其他参数保持不变。

你将得到一些在顶部光线良好但底部较暗的图像。

现在试试交换光线分配。

fashion photography, a woman
BREAK
(dimly lit:1.4)
BREAK
( hard light:1.2), (volumetric:1.2), well-lit

光线相应地交换了。

提示：

• 如果未看到效果，请调整提示词的权重。

• 区域提示并不总是百分之百有效。生成多一些的图片，并挑选出最好的结果。

使用 ControlNet 控制光照#

现在，任何教程都离不开提到 ControlNet… 所以本文也不可避免！

这种方法允许你精确控制光线。

Txt2img 设置#

在 txt2img 页面上，按照通常的方式生成图像。

选择要添加光线的图像。

将其保存到本地存储（我们稍后会用到 ControlNet）。

点击 Send to img2img。

Img2img 设置#

你的提示、负面提示、图像大小和种子值现在已经传输到 img2img 页面。

在 img2img 页面上，导航到 ControlNet 部分。

上传刚才保存的图像到 ControlNet Unit 0。

使用以下设置。

• Enable: Yes

• Pixel Perfect: Yes

• Allow preview: Yes

• Control Type: Depth

• Preprocessor: depth_zoe

• Model: control_xxxx_depth

• Control Weight: 0.6

滚动到 img2img canvas，删除图像。

我们将使用以下图像来控制光线。该图像指定了靠近顶部的聚光灯。

将此图像上传到 img2img canvas。

将 resize mode 设置为 Just Resize。

将 denoising strength 设置为 0.95。

按下 Generate。

你应该得到带有光源在顶部的图像。

你可以使用位于右上角的 Edit Tool（铅笔图标）来放大 img2img 画布中的某个区域。

点击铅笔图标后，拖动突出显示区域的角来调整大小。目前该工具中存在一些问题，你可能需要执行两次。

例如，下面的截图显示了将相同的图像裁剪，以便光源位于左上角。

请参考面部和帽子的左侧，比之前的图像更亮。

同样地，使用光源位于左下角，从底部左侧照亮图像。

或者使用更高对比度的对角光。

以下是一些光源图案的示例。

使用它们就可以不需要针对某个区域进行修改而实现所需的光线效果。

你可以不使用深度控制模型。而可以使用其他模型，如 canny 和 line art realistic。尝试不同的预处理器，看看哪个适合你。

如果看到不自然的颜色，请降低 Controlnet weight。调整降噪强度并观察效果。

这里直接将该软件分享出来给大家吧~

1.stable diffusion安装包

随着技术的迭代，目前 Stable Diffusion 已经能够生成非常艺术化的图片了，完全有赶超人类的架势，已经有不少工作被这类服务替代，比如制作一个 logo 图片，画一张虚拟老婆照片，画质堪比相机。

最新 Stable Diffusion 除了有win多个版本，就算说底端的显卡也能玩了哦！此外还带来了Mac版本，仅支持macOS 12.3或更高版本。

2.stable diffusion视频合集

我们在学习的时候，往往书籍源码难以理解，阅读困难，这时候视频教程教程是就很适合了，生动形象加上案例实战，一步步带你入坑stable diffusion，科学有趣才能更方便的学习下去。

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果，这时则需要通过使用大量训练数据，调整模型的超参数（如学习率、训练轮数、模型大小等），可以使得模型更好地适应数据集，并生成更加真实、准确、高质量的图像。

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言，整个SD学习过程中都离不开这本提示词手册。

5.SD从0到落地实战演练

如果你能在15天内完成所有的任务，那你堪称天才。然而，如果你能完成 60-70% 的内容，你就已经开始具备成为一名SD大神的正确特征了。

这份完整版的stable diffusion资料我已经打包好，需要的点击下方插件，即可前往免费领取！