ComfyUI 高级实战:天鹅湖儿童写真

大家好,我是每天分享AI应用的萤火君!

AI绘画在写真特别是儿童写真领域的应用比较广泛,这篇文章就来给大家介绍一个基于ComfyUI的儿童写真工作流,其中会用到一个天鹅湖的风格LoRA,所以称之为天鹅湖儿童写真。

因为在ComfyUI工作流中,每个节点和参数的设置都可能对最终效果产生比较大的影响,所以我会尽量详细介绍其中每个节点的功能和用途,让大家能够举一反三,做出更好的作品。

效果展示

使用方法

这个工作流主要分为如下三个部分:参考图和提示词、生成基础图、面部修正和放大。其中用到了IPAdapter、换脸,以及高清放大等技术,下面会有详细介绍,还请耐心阅读。

参考图和提示词

上传一张包含清晰人脸的正面照片,然后描述画面内容,包括湖面、天鹅等,这里给出一个通用的提示词:

best quality, masterpiece, rich details, ultra-realistic photography, 8k, high-definition, a six years girl, solo, looking at viewer, black hair, dress, hair ornament, flower, short sleeves, sitting, full body, shoes, water, hair bun, blue sky, lips, white dress, tiara, a bird, white footwear, bird on water, realistic, a big swan, blue sky, lake surface

以及通用的反向提示词:

embedding:EasyNegative, hands, two swans, (worst quality:2),(low quality:2),(normal quality:2),lowers,normal quality,blurry,skin spots,acnes,skin blemishes,bad anatomy,((monochrome)),((grayscale)),facing away,looking away,text,error,extra digit,fewer digits,cropped,jpeg artifacts,signature,watermark,username,cropped,poorly drawn hands,poorly drawn face,mutation,deformed,tilted head,bad hands,extra fingers,fewer digits,extra,limbs,extra arms,extra legs,malformed limbs,fused fingers,too many fingers,long neck,cross-eyed,mutated hands,bad body,proportions,gross proportions,missing fingers,missing arms,missing legs

生成基础图

这块注意两部分:模型和IPAdapter。

模型包括基础模型和LoRA模型,天鹅湖的效果主要是LoRA模型控制的,这个模型是SD1.5的,所以基础模型也要选择SD1.5版本的,不能使用SDXL,更不能使用Flux,选择一些真实摄影模型为佳;这里还使用了一个增强SD1.5的LoRA模型:SDXL_Detail_细节调节器,可以提升画面的质量。

IPAdapter在这里使用的是FaceID PLUS V2,是用来提取参考图中的面部信息,并应用在生成图片中,这样生成的人脸和参考图很像,但是还不够,后边我们还要执行换脸操作。有的同学可能会想,为什么不直接换脸呢?使用IPAdapter的好处是可以控制人物的脸型,这样后边换脸的时候,整个面部信息会更融洽,不会显得突兀。

面部修正和放大

注意这里做了两次换脸,放大前一次,放大后一次,因为使用SD放大会重绘一些细节,所以在放大后还要进行一次换脸。换脸使用的是ReActor插件,这个插件的效果还不错,Stable Diffusion WebUI 也可以使用。

那为什么要放大呢?因为SD1.5生成的图片尺寸都比较小,直接生成大尺寸的图片会导致画面崩溃,而我们最终需要的都是高清大图,所以这里使用了“SD放大”来做一个后期处理,放大的时候降噪幅度要设置的小一点,默认就是0.2。

这里使用的放大模型不是很常见,是一个专门针对面部的放大模型,名字是 4xFFHQDAT,大家可以在我分享的资源中下载(见文末)。

增加细节

这个工作流最后还使用了SUPIR来为图片增加更多细节,让照片看起来更真实更细致。SUPIR重绘的好处是增加细节,但是基本上不会改变原来的外在形象,大家可以看下这个对比,右边的图像是SUPIR处理之后的,会清晰不少,但是不像SD放大会改变人物形象。

工作流下载

发消息“工作流”到公-众\号“萤火遛AI”即可领取“儿童写真天鹅湖基础版”工作流,另外还包括其它几十个免费的ComfyUI 工作流。

制作不易,相关模型以及更多的高级写真工作流目前仅发布在我的“SD全面实战”专栏中:

点击链接访问:https://xiaobot.net/post/03340243-9df6-4ea0-bad6-9911a5034bd6

运行环境

很多同学本地都没有高性能的Nvidia显卡,安装模型插件也经常遇到问题,为了方便大家测试,我在云平台上创建了一个ComfyUI的镜像,已经内置好了常用的插件和模型,可以直接运行本文介绍的工作流,欢迎大家使用:好易智算GPU算力租赁|便宜、简单、好用

新用户会赠送一定的额度,可免费使用若干小时,如没有收到,请留言或私信给我。

后记

用好 ComfyUI:

  • 首先需要对 Stable Diffusion 的基本概念有清晰的理解,熟悉 ComfyUI 的各种基础操作;
  • 然后需要在实践过程中不断尝试、不断加深理解,提升综合运用各类节点进行创作的能力。

我将在后续文章中持续输出 ComfyUI 的相关知识和热门作品的工作流,帮助大家更快的掌握 ComfyUI,创作出满足自己需求的高质量作品。


以上就是本文的主要内容,如有问题,欢迎留言交流。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值