AI绘画专栏之换脸在SDXL中使用保持人脸一致性INSTANTID FACEID XADAPTER,comfyui

大家都知道腾讯AILab出的ipadapter系列带来的faceid,photomaker非常火,顺便分享一下instantid,跟faceid一样用来保持人脸一致性,孰强孰弱不好说,我只能说我觉得faceid更强,但现在又出来了一个Xadapter是什么鬼?

2024最全大厂面试题无需C币点我下载或者在网页打开全套面试题已打包(https://pan.quark.cn/s/865a0bbd5720

## [AI绘画关于SD,MJ,GPT,SDXL,Comfyui百科全书](https://yv4kfv1n3j.feishu.cn/docx/MRyxdaqz8ow5RjxyL1ucrvOYnnH)

Faceid

腾讯开源的Faceid终于可以用在SD里了,俗话说:“一张图片胜过千言万语”。尽管现有的从预训练模型直接微调的方法很有效,但它们需要大量的计算资源,并且与其他基础模型、文本提示和结构控件不兼容,而现在可以集成到SD内使用,

资源包链接:https://pan.quark.cn/s/f2751fcc4997

faceid :腾讯开源的Faceid终于可以用在SD里了,俗话说:“一张图片胜过千言万语”。尽管现有的从预训练模型直接微调的方法很有效,但它们需要大量的计算资源,并且与其他基础模型、文本提示和结构控件不兼容,而现在可以集成到SD内使用,

资源包链接:https://pan.quark.cn/s/914a9a7158c7

faceid人脸保持一致性的两种实现方案视频讲解https://www.bilibili.com/video/BV1LF4m1u7YY

模型下载链接https://pan.quark.cn/s/6096a0d47b50

Xadapter论文地址https://arxiv.org/abs/2312.02238

这是一种通用升级工具,可使预训练的即插即用模块(如 ControlNet、LoRA)直接与升级后的文本到图像扩散模型(如 SD-XL)配合使用,而无需进一步重新训练。

INSTANTID教程

模型下载链接https://pan.quark.cn/s/6096a0d47b50

模型存放位置

extensions\sd-webui-controlnet\annotator\downloads\insightface\models

\extensions\sd-webui-controlnet\models

1.提示词

1boy, (((Red hair, laughing))), solo, male focus, realistic, crossed arms, smile, shirt, facial hair, looking at viewer, black shirt, black hair, upper body, teeth, stubble, simple background, blue eyes, grin,

2.CN设置 第一个为Ipadapter 第二个为INS

  • 39
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: 使用DeepFaceLab进行视频换脸需要以下几个步骤: 1. 准备好源视频和目标脸图片。 2. 使用DeepFaceLab的"Extract"功能提取源视频人脸。 3. 使用DeepFaceLab的"Convert"功能将目标脸图片转换为适合换脸的格式。 4. 使用DeepFaceLab的"Merge"功能将源视频人脸与目标脸图片合并。 5. 使用DeepFaceLab的"Render"功能将合并后的视频渲染成最终的视频。 注意: DeepFaceLab是一个开源软件,使用这个软件可能会违反著作权法. ### 回答2: DeepFaceLab是一种基于人工智能技术的视频换脸工具,下面是使用DeepFaceLab进行视频换脸的步骤: 1. 准备素材:选择一个清晰的源视频和目标视频。源视频是希望更换脸部的人物视频,目标视频是希望替换为源视频人物脸部的视频。确保两个视频人物脸部要尽可能保持相似。 2. 下载和配置DeepFaceLab:从官方网站下载DeepFaceLab,并按照相关指引进行配置,包括安装环境、设置GPU等。 3. 数据集准备:使用DeepFaceLab自带的工具将源视频和目标视频人脸截取出来,并分别放入对应的文件夹。可以多截取几个角度和表情以提高换脸效果。 4. 预处理:运行DeepFaceLab的预处理脚本,对素材进行处理以提高后续处理效果。这一步会进行人脸对齐、抠图、人脸切割等。 5. 训练模型:使用DeepFaceLab的训练脚本来训练模型。这一步需要耐心等待,因为模型的训练需要消耗较长的时间。可以根据自己的需要调整训练的参数。 6. 换脸处理:使用训练好的模型进行换脸处理。通过运行DeepFaceLab提供的命令行操作,将源视频人脸替换到目标视频的相应位置,并生成结果视频。可以根据需要调整换脸的精度和速度等参数。 7. 后处理:生成的结果视频可能还有一些不完美的地方,可以使用视频编辑软件进行后期处理,如进一步调整脸部替换的效果、编辑合成等。 需要注意的是,DeepFaceLab是一项技术含量较高的工具,对硬件要求较高,而且使用过程可能会遇到一些技术问题。因此,初次使用者建议先阅读官方文档并参考相关教程进行学习和实践,以便更好地掌握和使用该工具。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值