【ComfyUI】虚拟换装新方案，10秒出图，高保真高清

今天分享一个虚拟换装新出的技术，效果很棒，速度快，服装迁移效果很好，可能是未来主流方案。

0****1

介绍

今天介绍一个最新的虚拟换装方案，对比较我们之前的Redux迁移方案，这个技术速度更快，对服装细节的处理更好，能直出2K，这就很棒，关键速度很快，4090电脑出1024x768只要3.6秒，显存占用最高不超过16G。

FiTDiT 是腾讯和复旦大学联合推出的一种利用 DiT 的新型服装感知增强技术，旨在实现高保真虚拟试衣。与传统的基于 U-Net 的 LDM 相比，FiTDiT 能够将更多参数和注意力分配给高分辨率特征，从而更好地保留服装纹理，并达到尺寸感知的试衣效果。

尽管基于图像的虚拟试衣技术已取得显著进展，但现有方法在处理多样化场景时仍面临生成高保真、适配精准的试穿图像的挑战。这些方法普遍存在纹理感知维护和尺寸感知适配等核心问题，制约了其整体性能。

为突破这些局限，研发团队提出了一种创新性的服装感知增强技术 FitDiT，该技术基于扩散变换器（DiT）框架实现高保真虚拟试穿，通过参数优化和注意力机制强化对高分辨率特征的处理能力。

• - 首先，在纹理感知维护方面，我们设计了融合服装先验演化的纹理提取器，通过微调服装特征提升对条纹、图案及文字等丰富细节的捕捉能力。同时引入频域学习方法，通过定制化的频域距离损失函数增强服装高频细节表现。

• - 针对尺寸感知适配问题，FitDiT 开发了扩张松弛掩码策略，可动态适应服装的正确长度，有效避免跨类别试穿时服装填满整个掩码区域的问题。

实验表明，FitDiT 在定性与定量评估中均超越所有基线模型，能够生成完美贴合且具备照片级精细细节的服装图像，同时经过DiT结构精简后单张1024x768图像的推理时间仅需4.57秒，显著优于现有方法。

项目介绍：

https://byjiang.com/FitDiT/

模型网站：

https://github.com/BoyuanJiang/FitDiT

在线体验：

02

相关安装

2.1 插件安装

目前已经支持ComfyUI

插件地址：

https://github.com/BoyuanJiang/FitDiT-ComfyUI

节点管理器搜FitDit，选择下图这个版本

2.2 模型安装

模型安装地址：

https://huggingface.co/BoyuanJiang/FitDiT/tree/main

模型分两类

•FitDiT_models

•CLIP

上面2个类型路径都是在 ComfyUI/models/下面，FitDiT_models 8G，CLIP 5.7G，截图如下

03

使用说明

完整工作流

核心节点就3个，加载模型、处理遮罩、服装迁移

加载模型

Load FitDiT Model节点用来加载模型，这个工作流我跑图大概占用16G显存，如果你显存没这么高

可以尝试把 with_offload 或 with_aggressive_offload 设置为True。

设置 with_offload 为True时，显存适中，推理时间中等，最高消耗13.6G显存，首次出图时间18.6秒，第二次出图7.29秒

设置 with_aggressive_offload 为True时，显存最低，推理时间最长，最高消耗13.6G显存，首次出图26.97秒，第二次出图15秒

真奇怪，最后一种我显存也是消耗13.6G，和第二次一样。

遮罩处理

Generate FitDiT Mask 用来自动处理遮罩，可以选择上身、下身、还是裙子。

简单的用这种节点处理就好，左边参数链接上一步的模型，以及你要处理的模特。

其实这里可以自己手动处理遮罩，系统默认的这个有时候是生成矩形的一个遮罩，有时候会把手部包含进来了，那样的话你会发现重新生成的手会容易异常。

服装迁移

FitDiT Try-On 节点用来最终生成图片，保持这个参数不变即可，最后一个resolution可以改变尺寸，这个就很棒，默认768x1024，还可以选择 1152x1536、1536x2048。

下面来几张效果图感受一下：

04

总结

以上就是这个最新的虚拟换装FiTDiT技术了，效果很不错，主要速度快，快来体验吧~

技术的迭代是飞快的，要关注最新的消息才不会掉队。

关注我，每天分享最新的ComfyUI技术前沿。

今天介绍的工作流和素材图我都打包好了。

工作流获取扫下图👇

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

对于0基础小白入门：

如果你是零基础小白，想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短，学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括：stable diffusion安装包、stable diffusion0基础入门全套PDF，视频学习教程。带你从零基础系统性的学好AI绘画！

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

（全套教程文末领取哈）

👉AI绘画必备工具👈

温馨提示：篇幅有限，已打包文件夹，获取方式在：文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

温馨提示：篇幅有限，已打包文件夹，获取方式在：文末

👉12000+AI关键词大合集👈

这份完整版的AI绘画全套学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】