InstantStyle：SDWeb Controlnet插件升级支持，增强版IPAdapter风格一致性免调优框架（附相关插件）

InstantStyle：SD-WebUI -Controlnet升级已支持（结尾附二维码免费领取相关插件）

InstantStyle介绍

在之前的文章（InstantStyle: 增强版IP-Adapter，文生图风格一致性免调优框架（附推理源码指南））介绍一款由InstantX团队发布的InstantStyle框架。InstantStyle是一款针对文生图任务的创新性框架，这个框架实现了风格保持和文本控制的最佳平衡。相当于图像特征的保持，生成风格一致的图像框架，增强版本的IP-Adapter框架。

InstantStyle框是架通过2个关键策略来解决了当前模型在生成风格一致图像方面的复杂挑战：

• • 特征空间内的风格和内容解耦机制：InstantStyle框架假设在相同特征空间内的特征可以相互相加或相减，从而将风格和内容从参考图像中解耦出来。得益于CLIP对全局特征的良好表征，在从图像特征中减去内容文本特征后，风格和内容可以被明确解耦。尽管这种方法很简单，但该方法在减轻内容泄露方面非常有效。

  

• • 仅将参考图像特征注入到风格特定块中：这样可以防止风格泄漏，并避免繁琐的权重调整，这通常是参数较多设计的特点，使用up blocks.0.attentions.1 和 down blocks.2.attentions.1 分别捕获了风格（颜色、材质、氛围）和空间布局（结构、构图）。

  

sd-webui-controlnet设置

近日InstantStyle