大家好,我是灵魂画师向阳
最近我一直在研究AI写真技术,前两篇文章介绍了使用 [ControlNet-InstantID] AI绘画SD 使用 InstantID 保持面部特征一致性 | 风格保持与迁移,轻松搞定私人写真摄影,SDWebUI使用指南生成真实人脸的技术,它们分别适用于SDXL和SD15,原理都是提取人物的面部特征,然后在生成图片时使用这些面部特征,从而实现特定人物的照片生成。
本文将继续分享另一种常见的AI写真技术:换脸大法,所谓换脸就是将照片中人物的面部特征更换为特定人物的面部信息。如果我们已经有了一些模版图片,不想或者不能再拍摄或者生成,使用换脸大法是个不错的选择。
本文使用的工具是 SD 中的 ReActor 插件,它可以集成到 Stable Diffusion WebUI 和 ComfyUI中,用起来还是比较方便的,而且使用ReActor处理的图片,面部贴合比较自然,图片清晰度也很好。
注意本文目的是分享AI写真技术,切勿用于非法用途。相关的模型和插件,请看文末扫描免费获取哦
效果展示
老规矩,先看效果。
大家猜猜这是谁?请在评论区留言,前10名猜对同学可免费领取本人SD全面实战教程。
安装部署
ReActor 作为插件可以集成到 Stable Diffusion WebUI 和 ComfyUI 中,本文主要以 Stable Diffusion WebUI 为例进行讲解,ComfyUI仅提供工作流。相关插件和工作流请看文末扫描免费获取哦
本地安装
Stable Diffusion WebUI 和 ComfyUI 自身的安装这里不再介绍了,需要的同学可以看我这两篇文章:
安装插件
- Stable Diffusion WebUI 中安装 ReActor:https://github.com/Gourieff/sd-webui-reactor
(注意:该链接需科学上网,如无法下载,请看下方扫描免费获取插件安装包)
安装成功之后,不要忘了重启程序。
重启一般会自动安装其它依赖程序包。
下载模型
这个插件依赖一些面部识别和面部交换模型,需要下载到相关的目录中。
面部识别模型:https://github.com/deepinsight/insightface/wiki/Model-Zoo
(注意:该链接需科学上网,如无法下载,请看下方扫描免费获取模型文件)
放到 SD WebUI 或者 ComfyUI 根目录下的 models/insightface/models/buffalo_l 目录中,如下图所示:
面部检测模型:https://huggingface.co/ezioruan/inswapper_128.onnx/blob/main/inswapper_128.onnx
放到 SD WebUI 或者 ComfyUI 根目录下的 models/insightface 目录中,如下图所示:
访问 Github 或者 Huggingface 不便的同学,请看上方扫描免费获取插件模型
使用 ReActor
我们在 SD WebUI 中安装 ReActor 成功后,可以在“文生图”、“图生图”和“高清化”等几个页面的下方看到ReActor 的功能区块。
上传待替换图片
我们先来看一个简单的换脸例子,在WebUI中进入“高清化”(有的翻译为“扩展功能”)页面:
这里直接上传一张图片,我们将要替换其中的人物面部信息。
下边的 Upscale 是放大图片的意思,是可选的,也可以不选择,其中:
3、选择放大模型,这个 R-ESRGAN 4x+ 是针对真实图片的。
4、缩放比例,这里2就是放大2倍。
设置 ReActor
在页面的下方找到 ReActor 区块。
按照下图中的顺序,上传一张人脸图片,用于替换上图中的人脸。
有几个参数简单介绍下:
1、面部遮罩修正:优化面部拼接的边缘,更贴合融洽。这是相比其它换脸工具做的更好之处。
2、替换图片和被替换图片中可能有多张人脸,也可能有多种性别,这里可以用来确定替换的人脸是哪一张。
3、面部修复:俗称修脸,让替换后的人脸更清晰、自然。Restore Face Visibility 一般默认为1,CodeFormer Weight让人脸更自然,值越小越自然,但是越偏离人物面部特征,值越大越接近替换图片中的面部特征。
最后点击生成就可以了,这个替换速度还是很快的。
在文生图和图生图中使用
这个插件完全可以在“文生图”和“图生图”中使用,它会在图片生成之后,再替换其中的人脸部分。
以 文生图 为例,正常填写相关参数:
然后设置 ReActor 的相关参数即可:
ComfyUI
在ComfyUI中使用这个插件也很简单,而且我们还可以对换脸之后的图片进行更多的优化处理。
这里用到的插件主要是 https://github.com/Gourieff/comfyui-reactor-node,换脸之后使用了一些面部细化技术,让肤色和表情更加自然。
感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。