揭秘Stable Diffusion：由线稿到绚丽效果图的深入学习！

前言

做设计的伙伴都知道SD的强大，但是，对于使用是有一定的门槛的，熟练之后，做设计那是得心应手，特别是室内设计，建筑设计，好了，接下来，我们开始今天的分享。

一、SD模型三大在线平台

分享stable diffusion模型加载及线稿图转化的过程之前，我们先要熟悉三个在线平台，分别如下：

全球领先的模型站点：C站，civital

全球第二大模型站点：拥抱脸，hugging face

全球第三大模型站点：T站，吐司

二、效果展示

我们先来展示一下效果，

1、线稿生成效果图

这是一个空白的画布，当然，你也可以手绘。以下以专业的景观设计方向为例：

通过SD，只需几秒钟生成出效果，如下图所示：

当然，这里还没有充分调整VAE，通过多次尝试不同滤镜，效果将会更加出色。接下来，我们将展示一些世界三大模型网站的资源。

2、模型建筑效果图展示

3、衣服和鞋子

4、动物

stable diffusion 会根据这些基础模型的信息来创造出类似的画作。

三、模型介绍

在Stable Diffusion（SD）的左上方，我们可以看到Autumn Leaves包中目前只加载了一个名为"anything"的模型。

这个模型是一个大杂烩，汇聚了各种风格，包括风景、建筑、动漫人物等。但当你需要制作独特风格的图像时，就需要更为优化的模型。你可以选择自己训练模型，也可以先下载其他人已经训练好的模型。对于新手来说，建议从白嫖学起。

这里以"anything"和"architecturerealmix"（一种建筑模型）为例，演示如何生成建筑图，前提是所有参数相同，提示词一致：

"anything"模型：

"architecturerealmix"模型：

我们可以发现，使用特定模型生成特定风格的效果更好。这也是我们下载或训练模型的原因。

让我们了解当前流行的模型类型。

1、大模型

主模型（底层模型、核心模型、base model） 典型命名：附加后缀ckpt、safetensors 通常规模：2G-7G 存储位置：D:\tool\novelai-webui一键包\novelai-webui-aki\models\Sta

可以称之为主模型（大模型），即在开篇左上角介绍的anything和architecturerealmix。

2、Lora模型

Lora模型通常以ckpt、safetensors和pt为尾缀，大小约为100MB左右，存储在D:\tool\novelai-webui一键包\novelai-webui-akiioaetdra路径中。

这个也可以被称为滤镜模型，即一种能够使你的图片更加绚丽多彩的模型。

3、embeddings模型

这被称为嵌入模型，通常以“pt”为尾缀。大小通常在几十KB左右，存储路径位于D:\tool\novelai-webui一键包\novelai-webui-aki\embeddings。与其他模型不同，这个模型是用于反向训练的，它涉及的内容将在后续进行另外的解释。

4、美化VAE模型

美化VAE模型常见模式：尾缀ckpt、pt 模型名包含vae 存放路径：D:\tool\novelai-webui一键包\novelai-webui-aki\models\VAE

这个模型也可以称之为图像滤镜，使用它可以使你的图片更加绚丽多彩。

5、DreamBooth模型和LyCORIS模型

DreamBooth模型以及LyCORIS模型都与训练相关，对它们的详细说明将在后续进行。关于安装路径，你可以将下载好的模型文件直接拖放到上述提及的存放路径中。以下以architecturerealmix为例说明。

所有的AI设计工具，模型和插件，都已经整理好了，👇获取~

四、安装方法

在这之前，将模型从模型网下载好之后，只需简单地将其拖放到以下路径即可。以architecturerealmix为例：

1、大模型（底模型、主模型、base model） 常见模式：尾缀ckpt、safetensors 常见大小：2G-7G 存放路径：D:\tool\novelai-webui一键包\novelai-webui-aki\models\Stable

models（模型）

2、将下载好的architecturerealmix模型复制粘贴到相应目录后，重新启动sd-webui即可加载模型。

3、加载完成后，前往查找并打开controlNet插件，然后将线稿图放入其中。

在这里，使用的是线稿图。

生成的效果如下图所示。

在此过程中，有一个需要注意的参数。

控制权重，数值越大，生成的图像越接近原模型，数值越小，创造性越强。对于新手建议设置在0.7到0.75左右。

在右侧还有一个controlNet模型，这是源文件中带有的，但需要用户自行安装：

将其全部复制，粘贴到指定文件夹内。完成以上步骤后，再次重启模型即可。

在进行线稿图转模型时，请确保点击启用controlNet选项。如下图所示；

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

这份完整版的AIGC全套学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】