Stable Diffusion【应用篇】【角色一致性】：如何从不同视角创造一致的人物角色？

您是否需要从不同的视角创建一致的 AI 角色？例如下面的图片效果。

一. 实现原理

制作一张同一个人物角色不同的视角网格图片，如下图所示。

使用ControlNet的Canny SDXL控制模型生成人物角色轮廓，如下图所示。

然后使用 IP Apadter FaceID Plus v2 从另一个参考图像复制面部。由于IP Apadter FaceID仅复制面部。它可以从参考图像中精确提取面部特征，因此可以准确地将面部转移到不同的视角。

二. 制作方法

*【第一步】：****大模型的选择*****

这里推荐使用：ProtoVision XL-High Fidelity-No Refiner，版本v6.6.0。

模型下载地址（文末网盘地址也可获取）

LiblibAI:https://www.liblib.art/modelinfo/3a3d10aa7fe644158c08a5a43da358db

*【第二步】：**提示词的编写***

我们以上图中第一张图片为例来进行说明。

*正向提示词*

Prompt：character sheet, color photo of woman, white background, blonde long hair, beautiful eyes, black shirt

提示词：人物表，女人的彩色照片，白色背景，金发长发，美丽的眼睛，黑色衬衫

反向提示词

disfigured, deformed, ugly, text, logo

相关参数设置

• 采样器：DPM++ 2M Karras
• 采样迭代步数：20
• 图片宽高：1024*1024。
• 提示词引导系数（CFG）：7

【第三步】：ControlNet的设置

这里我们需要配置2个ControlNet单元。

ControlNet单元0：canny控制模型配置

相关参数设置如下：

• 控制类型：选择"Canny(硬边缘)"
• 预处理器：canny
• 模型：diffusers_xl_canny_mid
• 控制权重：0.4
• 引导介入时机：0
• 引导终止时机：0.5

ControlNet单元1：Ip-Adapter控制模型配置

相关参数设置如下：

• 控制类型：选择"IP-Adapter"
• 预处理器：ip-adapter_face_id_plus
• 模型：ip-adapter-faceid-plusv2_sdxl
• 控制权重：0.7
• 引导介入时机：0
• 引导终止时机：1

【第四步】：*使用 ADetailer 自动修复脸部*

由于图片中人脸较多，需要开启ADetailer修复脸部。模型选择:face_yolov8n.pt****
****

【第五步】图片的生成

点击【生成】按钮，我们来看一下最终生成的图片效果。

三. 相关说明

（1） 这里使用的ControlNet canny和Ip Adapter控制器都是基于SDXL的，所以大模型的选择必须是基于SDXL的大模型。

（2）由于网格呈现的主要是人物头像，所以上传的图片最好也是人物肖像照片。全身照出来的效果可能并不是特别理想。

（3）自由定制化：在上面的制作过程中，我们只需要更改Ip Adapter的图片即可，也可以结合自己的需求修改正向提示词。

（4）如果脸部与图片不符

• 增加IP Adapter的控制器权重
• 降低 Canny ControlNet 的控制权重和引导终止时机

好了，今天的分享就到这里了，希望今天分享的内容对大家有所帮助。

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

**一、AIGC所有方向的学习路线**

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

这份完整版的学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】