ReActor 不香了,新一代换脸神器 InstantID

我们先来介绍 InstantID 在 SD WebUI 中的使用,好久没分享 WebUI 了哈!

不需要安装插件,只需要更新我们的 ControlNet 版本到最新版本,然后下载对应的模型放入对应的目录下就可以了,模型文件听雨会放在文末的网盘中,感兴趣的小伙伴可以自取。

把网盘中 WebUI 目录下的文件放入我们本地 SD 的 ControlNet 目录下,大家按自己的目录来哈:

\sd-webui-aki-v4.1\models\ControlNet

图片

然后我们重启我们的 SD 就可以了。

重启以后,我们可以在 ControlNet 看到一个新的控制类型:Instant_lD。

图片

操作也蛮简单的,就按文生图的正常流程走就行,这里需要注意一下,大模型需要选择 SDXL 版本的大模型。

CFG 官方推荐是在 4~5 之间,效果最好。当然大模型不一样也可能会有区别,出图效果不好的时候,大家可以调整试试。

图片

Instant_lD 总共需要用到两个 ControlNet,第一个 ControlNet 主要是上传我们想要换脸的脸部照片,越清晰越好;

第二个 ControlNet 主要是用来上传一张可以识别面部的人物图片,主要用来判断最终生成的图片的人物脸部出现在哪个位置。

我们先来配置第一个 ControlNet,上传我们想要换脸的照片,勾选启用、完美像素模式可勾可不勾,然后选中 Instant_lD 控制类型,这样预处理器和模型就比较好选了。

预处理器选择:instant_id_face_embedding

模型选择:ip-adapter_instant_id_sdxl

图片

接下来我们来配置第二个 ControlNet,启用肯定是要勾选的,完美像素模式可勾可不勾。

允许预览也可以不勾选,听雨这里勾选是让小伙伴们看下第二个 ControlNet 的效果,主要是用来识别上传的图像中的脸部的位置,也就是最终生成的图片的脸部位置。

如果我们这里只上传一张脸部图片的话,生成的图片大概率也是一张脸部图片,上传一张半身照,大概率生成的也是一张半身照。

预处理器选择:instant_id_face_keypoints

模型选择:control_instant_id_sdxl

图片

不知道大家可以看清不,这换脸还是很成功哒,效果相当可以。脸部的位置也和我们上传的第二张图片相符。

图片

WebUI 安装和操作是不是很简单,小伙伴们玩起来吧!


接下来我们来讲讲 ComfyUI 中如何使用 InstantID 吧!在 ComfyUI 管理器中搜索 「InstantID」,然后选择第一个安装。

图片

接下来把听雨网盘中 comfyUI 目录下的文件下载下来,这里和 WebUI 中的模型其实是一样的,改了一个名字而已。

图片

文件下载下来以后,放入 InstantID 的插件目录下,小伙伴们看自己的插件目录在哪哈:

\ComfyUI\custom_nodes\ComfyUI-InstantID\checkpoints

图片

然后我们重启 ComfyUI 就可以了。

我们直接上工作流,效果还可以哈。这边上传图片的操作和 WebUI 中也是一样的,第一张图是换脸的图,第二张图是实际头像所在位置的图。

这里有些模型默认出来的可能就是下图这种类似黑白的图片,小伙伴们可以在提示词中加一些颜色的提示词就可以了,听雨是觉得这张好看,就截这张图了。

这里要说一下,预览图像是不会保存图片的。好的图,小伙伴们记得手动保存哦!当然也可以把预览图像节点换成保存图像节点就没这个问题了。这个大家自己考虑哈!

图片

其他参数没什么好介绍的,我们主要来介绍最前边的三个加载器。之前我们不是把下载的模型放在指定目录下了么,这里就需要把我们指定模型的路径拷贝过来。

第一个加载器,主要是我们刚才放置 controlnet 模型的位置,以下是听雨的文件位置,小伙伴参考一下哈:

D:\Programs\ComfyUI-aki\ComfyUI-aki-v1.1\custom_nodes\ComfyUI-InstantID\checkpoints\controlnet

第二个加载器没啥好说的,就是我们大模型,选择 SDXL 版本的模型即可。

第三个加载器是 ip-adapter 的加载器,听雨的文件路径是,大家改成自己的哈,不要照抄听雨的:

D:\Programs\ComfyUI-aki\ComfyUI-aki-v1.1\custom_nodes\ComfyUI-InstantID\checkpoint

图片

还有一个提示词风格化节点,风格选项可以选择不同的风格。

图片

以上的基础工作流节点就介绍完了,我们再介绍一个在 Instant ID 基础上添加风格化节点的工作流,大家刚加载工作流的时候可能会出现以下这种情况,这说明有缺失的节点。

图片

我们打开 ComfyUI 管理器,然后点击安装缺失节点。

图片

弹出的节点安装界面中会显示缺失的节点,我们点击安装即可。

图片

我们可以看到工作流中多了一个可视化风格节点。

图片

这里只需要关注 1 和 2 就可以了,和之前的一样,把我们本地的路径同步过来。

中间的模型加载器不用管,这里是默认去网上下载的,当然也可以把这个节点换成从本地模型库去取。

图片

再看下我们的可视化的风格化节点,总共有两个节点,第一个节点代表的是艺术家风格,我们可以尝试不同的艺术家风格类型。

第二个节点是艺术运动,这个就比较抽象了,听雨也不知道应该咋形容,小伙伴们自己去了解一下吧,节点上还能选择当前风格的权重,设为 0 那就是忽略了。

图片

今天的分享就到这里啦,感兴趣的小伙伴快去试试吧!

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

1.stable diffusion安装包 (全套教程文末领取哈)

随着技术的迭代,目前 Stable Diffusion 已经能够生成非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替代,比如制作一个 logo 图片,画一张虚拟老婆照片,画质堪比相机。

最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!此外还带来了Mac版本,仅支持macOS 12.3或更高版本

在这里插入图片描述

2.stable diffusion视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入坑stable diffusion,科学有趣才能更方便的学习下去。

在这里插入图片描述

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果,这时则需要通过使用大量训练数据,调整模型的超参数(如学习率、训练轮数、模型大小等),可以使得模型更好地适应数据集,并生成更加真实、准确、高质量的图像。

在这里插入图片描述

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。

在这里插入图片描述

5.AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

  • 16
    点赞
  • 12
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值