Stable Diffusion零基础学习

Stable Diffusion学习笔记TOP13

---

@@_插件篇之ControlNet功能篇

ControlNet目前支持的10多种预处理器，根据数据检测种类可分为两种类型：
1、功能型：拥有着不同的能力
2、构图型：控制着SD扩散图形的构图规则

T2IA自适应：通过自动调整模型的处理方法和参数，以适应输入控制信号的特征，从而实现更高效的图像生成和控制；有三个主要功能，如下所示。

1、t2ia_color_grid：像素化处理 —— 是将参考图像缩小64倍，然后将其扩展回原始大小，结果是局部平均颜色的网络状态；处理后看到的是一大片马赛克，这个也就是提取图像中的主要颜色；提取图像中主要颜色的分布，不保留构图。
【适合需要固定整体颜色时使用。】

2、t2ia_sketch_pidi：手绘边缘处理 —— 可以提取图像大体轮廓，【适用于需要固定图像主要构图时使用】

3、t2ia_style_clipvision：风格迁移处理 —— 是将输入图像转换为CLIP视觉嵌入，这种嵌入包含了有关图像内容和风格的丰富信息；还可以参考颜色构图、细小的元素，它的参考强度较之Reference（参考）更强。