这两天,新发现一个基于flux-dev-de-distill微调的模型–Flux Sigma模型,它可以实现32K的图片放大并保持细节。那么这个flux-dev-de-distill模型又是什么呢?
就来给大家简单说一下,distill模型是一个从 flux.1-dev 中分离出的实验模型,它删除了原始的提取引导(guidance),采用真正的无分类器引导(guidance)进行训练,从而实现使用真正的 CFG 而不是蒸馏的 CFG。说了这么多,可能大家还是不明白,表紧上图:
这下明白了吧,就是出图更厉害更真实呗。
而今天给大家介绍的这个模型–Flux Sigma就是基于flux-dev-de-distill模型训练的,目前还只推出alpha1版本,且作者只训练了男性数据集,后续还会继续训练女性数据集!
目前作者提供了fp16版本以及各种的枝剪版本,我们先来看下它的网址:
https://civitai.com/models/1223425?modelVersionId=1378381
根据作者介绍,Flux Sigma模型在原始的高清图像的每个细节上进行训练,从而绕过1024x1204的限制,这样使得模型能够在拼接的放大过程中可以产生非常精细的细节,即使在32K的放大中也可以良好保持。
好了,接下来老金就带大家一步步安装这个Flux Sigma模型,它的分词器模型的使用与一般FLUX模型使用的不一样,我们先来看下工作流:
我们可以看到,它使用了三个分词模型(左),那与我们平时只使用2个分词模型(右)有什么区别,我们来看下比较,
差别还是很明显的,接下来我们来下载这几个分词模型:
https://huggingface.co/city96/t5-v1_1-xxl-encoder-gguf/tree/main
老金列出的是GGUF版本t5-v1_1-xxl,大家根据自己需要选择一个下载就好咯,下载的模型到models/clip目录下
https://huggingface.co/zer0int/CLIP-GmP-ViT-L-14/tree/main
下载红框中的模型到models/clip目录下
https://huggingface.co/stabilityai/stable-diffusion-3.5-large/tree/main/text_encoders
下载红框中的模型到models/clip目录下
Flux Sigma模型出图速度比较慢,为了提升模型的出图速度,我们还需要使用两个加速LORA模型:
https://huggingface.co/ostris/OpenFLUX.1/tree/main
https://huggingface.co/alimama-creative/FLUX.1-Turbo-Alpha/tree/main
下载后放入models/loras目录下
现在可以出图咯,我们来看下生成的图像效果比较,分为未使用加速(左),使用turbo-alpha(中),使用OpenFLUX(右)
效果还是相当明显的,不用加速LORA的效果最好,使用turbo加速出图还是可以接受的,方便用于刷图。另外,作者介绍只训练了男性数据集,老金试了下女性角色,效果还是不错滴,也让老金对后续训练完女性数据集的模型充满期待。
最后,老金再给大家说一下Flux Sigma模型的几个设置:
- 需要设置3个分词器模型,老金使用的是GGUF模型,大家可以根据自己机器的配置选择相应版本的模型。
- 如果使用加速LORA的话,它们的权重各不相同,turbo模型为:1,openflux模型为:0.33
-
使用加速LORA的话,步数为:8-16,如果不使用加速LORA的话,步数:50-60。
-
CFG为:2-4。
-
负面提示词也是起作用的,大家可以根据需要填写
-
如果要画小姐姐的话,需要比较复杂的提示词,仅少量几个单词,容易出鬼图。
赠人玫瑰,手留余香
▼▼▼▼点击复制下载链接后在APP中直接打开▼▼▼▼
👇👇👇👇👇👇👇👇👇👇👇
夸克网盘分享 (quark.cn)
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
对于0基础小白入门:
如果你是零基础小白,想快速入门AI绘画是可以考虑的。
一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案
包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍
👉stable diffusion新手0基础入门PDF👈
(全套教程文末领取哈)
👉AI绘画必备工具👈
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉AI绘画基础+速成+进阶使用教程👈
观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉12000+AI关键词大合集👈
这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
】
