【ComfyUI 实战】AI 微短剧人物 IP 一致性设计:多视图工作流打造专属主角(附教程)

【 ComfyUI】AI微短剧人物IP设计必备的人物IP角色一致性多视图设计工作流,打造你的微短剧主角!推荐学习!

各位好!随着阿里开源的通义成相AI视频模型wan2.1的发布,AI视频技术迎来了新的突破。当前,AI视频生态正加速成熟,业界焦点主要集中在AI短剧和AI电影领域。然而,无论是哪种形式,画面质量始终是核心要素。从技术角度而言,画面(或称为分镜)是视频生成的基础,它直接决定了AI视频、电影及短剧的成败,其中人物与场景的一致性更是关键所在。

最近也在研究AI视频,在人物角色设计方面,虽然闭源产品像即梦、可灵等,可通过参考图来实现人物特征的迁移,但效果需要一定的抽卡,同时需要一定的费用支出。所以,最近closerAI团队搭建了人物IP角色一致性多视图设计工作流用于人物IP设计。

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

人物IP多视图一致性设计工作流

为了能更好地赋能我们在AI短剧时候的人物设计,搭建了这样一个工作流,主要为了实现在AI微短剧生产时,为人物角色IP提供多视角的设计图,可用于闭源产品中作参考图,同时也可直接利用它生成微短剧的分镜图。以下是closerAI 人物IP多视图一致性设计工作流全貌。

在这里插入图片描述

工作流分步执行,之前也有设计过一次执行完,但执行时间过长,建议还是分步执行,效率最高。

步骤为:

上传服饰——反推服饰形成提示词——提示词翻译——复制整理好的提示词进行flux生图——放大——人物特征迁移。

一、生成白底服饰图

首先,我们找一张喜欢的衣服,这里工作流加入了分割模块,如果服饰含有人物,则使用这个模块将衣服分割出来。如果有白底服饰图就直接进入服饰提示词反推即可。下面,我们找了以下一张图:

在这里插入图片描述

分割出来的服饰并形成了以下白底服饰图。

在这里插入图片描述

结果如下:

在这里插入图片描述

在这里插入图片描述

这个控制模块启用与否,反推则打开,其它关闭,一步步来,不然显存不够。

二、反推服饰白底服饰图

我们将白底图复制到反推的加载图像中。

在这里插入图片描述

在这里插入图片描述

黏贴后,执行反推,这里提供了两个反推方式,一个是cliption反推,一个是deepseek janus反推,可根据情况二选一使用。

我这里用cliption。高效。

得出以下提示词:

提示词:a black dress with a deep v - neckline and long legs is displayed against a white background. the dress has a fitted bodice with a flared waistband and a flared skirt. the belt has a gold buckle and is paired with black high - heeled sandals.

这里不仅仅是服饰的反推,场景也可以反推,大家加载一场景图进行反推即可,然后复制提示词备用。

三、提示词工程

然后启用提示词翻译模块,这里我们写好了提示词,大家将服饰提示词复制进去翻译。当然,场景提示词也可以复制进去,也可以自己写。这里我直接写白色背景。

在这里插入图片描述

得出完整的提示词:

Image quality: 8K, best quality, super detail, HD, super detail, surreal, realistic, masterpiece, photography;``This is a full-body portrait of a person.``The size of this photographic image can reasonably evenly distribute each image;``This photographic image is composed of four images: a close-up of the person and a three-view, from left to right, a close-up of the person, a full-body front view of the person, a left view, and a rear view;``The person in the picture is wearing a black, knee-length dress with three-quarter sleeves. The dress features a V-neckline and a cinched waist accentuated by a large decorative buckle.;``The background is a white background;


四、flux生图

这里也用到了前天介绍的sageAttention进行提速。安装不了的,可以直接忽略或删除这个节点。

参考图也是我自己生成的一张,加载进去进行图生图。

在这里插入图片描述

在这里插入图片描述

LoRA可下载一个三视图的进行控制,这里提示词其实也进行控制了,有无也无所谓,我们是设计人物IP,不需要严谨的三视图。多视图即可。有时候让flux自由发挥,效果更棒。为什么不加入controlnet呢?太久了,时间上等不及了。多抽卡即可。注意我这里设置的生图尺寸是2048*1024,我8G生图时间3~4分钟,大家参考下吧。如果不需要这么大的尺寸,自己更改就行。最好按我尺寸的比例按倍数缩放。

以下是生图结果。

在这里插入图片描述

五、高清放大

这里我们使用了TTP放大。将flux生图结果,加载至TTP中执行即可。

在这里插入图片描述

我们加入人物特征迁移:一次性换成同一个人。这里可以先进行放大,再换。先进行缩放,再进行换脸。如下图设置。

在这里插入图片描述

得出以下结果。

在这里插入图片描述

效果不错的。未加入分割,因为它放大结果差不多8K了够大了的,大家截图即可(我个人觉得)
为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。

由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值