FreeU一键为你的SD绘图增添惊艳光影和质量，SD&ComfyUI教程

最新推荐文章于 2024-12-04 13:47:17 发布

程序员一东

最新推荐文章于 2024-12-04 13:47:17 发布

阅读量859

点赞数 11

文章标签：人工智能美女 stable diffusion AI作画 ai绘画

本文链接：https://blog.csdn.net/eqiqi/article/details/143067895

版权

在艺术创作领域，光影和质量是作品成功的关键。如今，借助FreeU这款工具，你只需一键操作，就能轻松为你的SD绘图增添惊艳的光影和质量。本文将带你深入了解FreeU的使用方法，助你轻松掌握这项前沿技术。

在这里插入图片描述

FreeU是一款基于深度学习的图像编辑软件，它能够根据用户的输入，自动生成个性化的人物形象和背景。通过调整发型、眼睛、嘴巴等部位，FreeU可以帮助用户打造独特的个性化人物形象。

FreeU简介

今天主题介绍为：FreeU 一款Stable Diffusion的实用插件，它通过调整模型的去噪器来提升图像质量
，并且该方法针对写实模型 或动漫模型 都有显著的质量增强效果。FreeU 是一种无需额外训练或微调即可增强图像的生成质量
。关键的洞察是策略性地重新权衡来自U-Net跳跃连接和主干特征图的贡献，以利用U-Net架构的两个组成部分的优势
。研究团队在图像和视频生成任务实验结果表明，FreeU可以轻松集成到现有的扩散模型中，例如Stable
Diffusion、DreamBooth、ModelScope、Rerender和ReVersion等，并且只需几行代码即可通过调整两个缩放因子在推理过程中提高生成质量。

FreeU 方法通过以下步骤实现：

• 识别U-Net架构的贡献：分析U-Net的主干和跳跃连接对去噪过程的不同贡献。
• 重新权衡贡献：调整来自跳跃连接和主干特征图的贡献，以发挥两者的优势。
• 无需额外训练：FreeU不需要额外的训练或微调，可以直接应用于现有的扩散模型。
• 易于集成：只需在推理过程中调整两个缩放因子，即可轻松集成到现有模型中。

FreeU插件使用指南

当前FreeU 在AUTOMATIC1111 SD WebUI 和ComfyUI 中，都已经得到了很好的支持。

SD WebUI使用指南

通过SD WebUI的扩展标签页 ->从URL安装 ->扩展的git仓库URL ，点击安装
按钮就可以安装对应插件。插件地址为 （文末可自行扫描获取）

选择对应模型，输入提示词，同时配置启用FreeU 插件和选择对应模型版本 ，就可以开始插件的体验。FreeU 插件配置如下所示：

ComfyUI使用指南

首先需要更新ComfyUI 到最新版本，然后通过ComfyUI插件管理器安装FreeU_Advanced ，加载文末工作流文件
，然后重启ComfyUI ，即可开始体验。插件地址：https://github.com/WASasquatch/FreeU_Advanced

工作流界面

在普通的文生图基础工作流基础上，在Checkpoint 与KSampler 节点之间增加了一个FreeU_V2 节点.

SDXL多版本对比工作流 ：

SD1.5多版本对比工作流
：

Free体验

在本文中涉及的基础模型和模型配置如下：

• 绘图模型：Dream Tech XL | 筑梦工业XL
• 采样方法：DPM++ 2M Karras
• 迭代步数：30步
• 分辨率：1024*1024
• 提示词引导系数 (CFG Scale)：7
• 启用ADetailer 修复脸部和手部细节。

本文涉及模型下载 地址：

• 写实模型： Dream Tech XL | 筑梦工业XL ：https://www.liblib.art/modelinfo/5611e2f826be47f5b8c7eae45ed5434a
• 动漫模型：卡通–万象熔炉 | Anything XL ：https://www.liblib.art/modelinfo/1f6480170e93468dad8cf52696bd5538?from=search

负向提示词 ：

(nsfw:1.5),logo,text,badhandv4,EasyNegative,ng_deepnegative_v1_75t,rev2-badprompt,verybadimagenegative_v1.3,negative_hand-neg,mutated hands and fingers,poorly drawn face,extra limb,missing limb,disconnected limbs,malformed hands,ugly,


  * 1

01：动漫风

sensitive,18-old-
years,1girl,solo,long_hair,looking_at_viewer,blonde_hair,dress,bare_shoulders,jewelry,sitting,closed_mouth,collarbone,pink_hair,earrings,multicolored_hair,sleeveless,white_dress,cup,lips,makeup,gradient_hair,depth_of_field,night,sleeveless_dress,blurry_background,crossed_legs,alcohol,drinking_glass,realistic,wine_glass,city_lights,

不启用FreeU演示：在这里插入图片描述

启用FreeU演示：

02：写实风

这里写实提示语采用与动漫风相同提示词演示。

sensitive,18-old-
years,1girl,solo,long_hair,looking_at_viewer,blonde_hair,dress,bare_shoulders,jewelry,sitting,closed_mouth,collarbone,pink_hair,earrings,multicolored_hair,sleeveless,white_dress,cup,lips,makeup,gradient_hair,depth_of_field,night,sleeveless_dress,blurry_background,crossed_legs,alcohol,drinking_glass,realistic,wine_glass,city_lights,