这应当算作是极客菌我分享的换脸工具系列中的又一力作,从最初的roop,到之后的ReActor,再到备受欢迎的InstantID,以及今日重点介绍的字节开源产品——PuLID。
ComfyUI,一款功能强大的AI图像编辑软件,以其便捷的操作和丰富的功能,深受广大艺术爱好者和专业人士的喜爱。而字节跳动推出的最强换脸插件PuLID,更是为ComfyUI带来了革命性的变化。本文将带你深入了解PuLID的使用方法,助你轻松掌握这款插件,让你的AI绘画创作更上一层楼。
提及PuLID,首要原因并非仅仅在于它强大的换脸技术,实际上,与InstantID相较,两者在换脸功能上的差距并不显著。
但PuLID真正引人注目的,在于其独特的编辑能力,这是InstantID目前尚未具备的!尽管这种编辑功能尚待完善,但其潜力已然不容忽视。
01.安装
插件叫做:PuLID_ComfyUI,我们直接在管理器中进行搜索安装就可以了。(相关插件文末可自行扫描获取)
除此之外,我们还需要下载对应的模型。
为了顺利进行操作,我们需要定位到本地的指定目录,接着将文末群聊中提供的相应目录下的模型文件复制至该目录。若是在目标目录下未找到名为“pulid”的文件夹,则需我们自行创建一个。
/ComfyUI/models/pulid/
* 1
还有一个 antelopev2 目录下的文件则放到以下目录。
/ComfyUI/models/insightface/models/antelopev2
* 1
到这里其实还不算完,只是手动部分的安装结束了!
剩下的模型会在我们第一次运行工作流的时候自动下载。
02.运行
我们主要来关注一下 PuLID 的几个节点,可以讲一讲的貌似也就「应用PuLID」节点了。
权重以及开始和结束都是字面意思这里就不讲了,我们来讲讲方法,这里可以选择三种类型,分别是精确、风格和平衡。
基础工作流的设置其实相当直观,需要我们进行调整的也就这一点,其余部分均沿用了文生图的基础工作流框架。
在此,我们也不妨将当前的工作流与InstantID进行一番对比。
在采用相同的大模型、提示词以及采样器步数等条件时,两个工具在生成图像时的脸部还原效果都相当精确!
从这一角度来看,似乎这两款模型工具在功能上的差异并不显著。
让我们尝试更换一个提示词,并在其末尾特别指定添加一副太阳镜。
观察结果后,我们可以发现,PuLID 生成的图像中人物直接佩戴了太阳镜,而 InstantID 的输出中则没有。
实际上,InstantID 也有可能生成带有太阳镜的图像,但这似乎是一个概率事件。经过多次尝试,可能只有少数几次能够看到人物佩戴了太阳镜,而 PuLID
则几乎每次都能成功添加太阳镜。
让我们再尝试一次,将图像中的人物变为男孩看看效果,结果真的很帅气!以下是展示,左边是PuLID生成的,右边则是InstantID的输出哦!
再来生成小女孩试试,也差不多!
PuLID 同样具备与 IPAdapter 结合的能力,用户可以通过上传参考图片,在保持脸部特征一致性的基础上,生成具有不同艺术风格的图片。
在PuLID的基础工作流之上,我们只需增加一个IPAdapter节点,但请确保将IPAdapter更新至最新版本,以确保最佳的运行效果。
插件作者独具匠心,还设计了一个可以将不同人脸巧妙融合在一张图片中的工作流。各位朋友也可以尝试一下这个新奇的功能,这里就不一一截图展示了,但你们可以直接在文末的群聊中获取详细的工作流信息哦。
C
但由于AIGC刚刚爆火,网上相关内容的文章博客五花八门、良莠不齐。要么杂乱、零散、碎片化,看着看着就衔接不上了,要么内容质量太浅,学不到干货。
这里分享给大家一份Adobe大神整理的《AIGC全家桶学习笔记》,相信大家会对AIGC有着更深入、更系统的理解。
有需要的朋友,可以长按下方二维码,免费领取!
AIGC所有方向的学习路线思维导图
这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。如果下面这个学习路线能帮助大家将AI利用到自身工作上去,那么我的使命也就完成了:
AIGC工具库
AIGC工具库是一个利用人工智能技术来生成应用程序的代码和内容的工具集合,通过使用AIGC工具库,能更加快速,准确的辅助我们学习AIGC
有需要的朋友,可以点击下方卡片免费领取!
精品AIGC学习书籍手册
书籍阅读永不过时,阅读AIGC经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验,结合自身案例融会贯通。
AI绘画视频合集
我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,科学有趣才能更方便的学习下去。
有需要的朋友,可以长按下方二维码,免费领取!