Stable Diffusion ControlNet垫图：IP-Adapter实现图片风格迁移

IP-Adapter实现的SD垫图功能对我们的图片处理非常有用，后面我们会进行一系列IP-Adapter的应用分享，通过具体的实例真正看到IP-Adapter的强大。
文章使用的AI工具SD整合包、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了，无需自行查找，有需要的小伙伴下方扫码自行获取。

一. 改变图片主体形态

所谓改变主体形态，就是将图片中的主体元素，应用到一种新的图片结构风格中，在保持原图片主体元素的基础上，使用新的图片结构风格生成一张新的图片。由于需要使用到新的图片结构，所以需要使用到2个ControlNet单元。

下面我们通过实例来演示一下。

【第一步】：ControlNet单元0的参数设置：IP-Adapter设置

相关参数设置如下：

• 控制类型：选择"IP-Adapter"

• 预处理器：ip-adapter_clip_sd15

• 模型：ip-adapter_sd15_plus

• 控制权重：设置为1。

【第二步】：ControlNet单元1的参数设置：Depth设置

Depth控制模型，从图片中提取深度信息，用于控制图片的结构。

相关参数设置如下：

• 控制类型：选择"Depth"

• 预处理器：depth_midas

• 模型：contorl_xxx_sd15_depth

• 控制权重：设置为1。

【第三步】：文生图相关参数设置

由于已经有IP-Adapter垫图，这里无需编写正向和反向提示词。

【第四步】：大模型的选择以及图片的生成

这里我们选择写实模型majicMIX realistic v7，其他的模型Realistic Version、ReV Animated也可以。

原图片与新的图片风格

生成的新图片。

**相关说明：**这里使用的是Depth控制模型控制图片的结构，也可以使用lineart、canny、softedge等线条类模型。

canny模型

lineart模型：预处理器 lineart_standard****

softedge模型：预处理器 softedge_pidinet****

二. 人物变化

下面我们看一下一个女孩如果变成男孩会是什么样子。

ControlNet参数设置。

相关参数设置如下：

• 控制类型：选择"IP-Adapter"

• 预处理器：ip-adapter_clip_sd15

• 模型：ip-adapter_sd15_plus

• 控制权重：设置为0.4（控制在0.3-0.5之间，调整ControlNet的控制权重，让提示词作用更明显）。

• 引导终止时机：设置为0.8(0.6-0.8之间)

正向提示词：a boy,upper body,(buzz cut hairstyle :1.6),

大模型：majicMIX realistic v7

下面我们对比看一下效果。

三. 改变人物动作姿势

改变人物动作姿势主要是通过IP-Adapter+OpenPose来实现，其中IP-Adapter控制人物的外形，OpenPose来灵活控制人物的姿势。

【第一步】：ControlNet单元0的参数设置：IP-Adapter设置

【第二步】：ControlNet单元1的参数设置：OpenPose设置

【第三步】：文生图相关参数设置

由于已经有IP-Adapter垫图，这里无需编写正向和反向提示词。

【第四步】：大模型的选择以及图片的生成

这里我们选择写实模型majicMIX realistic v7。

原图片与人物姿势。

生成的新图片

我们修改一下IP-Adapter控制模型为ip-adapter-plus-face_sd15。

我们再换更换一下人物别的姿势看一下效果。

原图片和人物姿势

生成的新图片

IP-Adapter垫图功能非常强大，本文主要分享了IP-Adapter的垫图功能结合ControlNet控制器实现图片风格迁移、人物姿势控制等场景应用，关于IP-Adapter的垫图功能还有一些其他的应用场景后面还会继续分享，大家可以保持关注。

好了，今天的分享就到这里了，希望今天分享的内容对大家有所帮助。

文章使用的AI工具SD整合包、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了，无需自行查找，有需要的小伙伴文末扫码自行获取。

Stable Diffusion 最强提示词手册

• Stable Diffusion介绍
• OpenArt介绍
• 提示词（Prompt） 工程介绍
• …

第一章、提示词格式

• 提问引导
• 示例
• 单词的顺序
• …

有需要的朋友，可以点击下方卡片免费领取！

第二章、修饰词（Modifiers）

• Photography/摄影
• Art Mediums/艺术媒介
• Artists/艺术家
• Illustration/插图
• Emotions/情感
• Aesthetics/美学
• …

第三章、 Magic words（咒语）

• Highly detailed/高细节
• Professional/专业
• Vivid Colors/鲜艳的颜色
• Bokeh/背景虚化
• Sketch vs Painting/素描 vs 绘画
• …

第四章、Stable Diffusion参数

• Resolution/分辨率
• CFC/提词相关性
• Step count/步数
• Seed/种子
• Sampler/采样
• 反向提示词(Prompt)

第5章 img2img（图生图）,in/outpainting（扩展/重绘)

• 将草图转化为专业艺术作品
• 风格转换
• lmg2lmg 变体
• Img2lmg+多个AI问题
• lmg2lmg 低强度变体
• 重绘
• 扩展/裁剪
• …

第6章 重要提示

• 词语的顺序和词语本身一样重要
• 不要忘记常规工具
• 反向提示词(Prompt)
• …

第7章 OpenArt展示

• 提示词 (Prompt)
• 案例展示
• …

篇幅有限，这里就不一一展示了，有需要的朋友可以点击下方的卡片进行领取！