AI出图新巅峰!Flux Sigma模型让你每一张图都细节炸裂!

这两天,新发现一个基于flux-dev-de-distill微调的模型–Flux Sigma模型,它可以实现32K的图片放大并保持细节。那么这个flux-dev-de-distill模型又是什么呢?

就来给大家简单说一下,distill模型是一个从 flux.1-dev 中分离出的实验模型,它删除了原始的提取引导(guidance),采用真正的无分类器引导(guidance)进行训练,从而实现使用真正的 CFG 而不是蒸馏的 CFG。说了这么多,可能大家还是不明白,表紧上图:

这下明白了吧,就是出图更厉害更真实呗。

而今天给大家介绍的这个模型–Flux Sigma就是基于flux-dev-de-distill模型训练的,目前还只推出alpha1版本,且作者只训练了男性数据集,后续还会继续训练女性数据集!

目前作者提供了fp16版本以及各种的枝剪版本,我们先来看下它的网址:

https://civitai.com/models/1223425?modelVersionId=1378381

根据作者介绍,Flux Sigma模型在原始的高清图像的每个细节上进行训练,从而绕过1024x1204的限制,这样使得模型能够在拼接的放大过程中可以产生非常精细的细节,即使在32K的放大中也可以良好保持。

好了,接下来老金就带大家一步步安装这个Flux Sigma模型,它的分词器模型的使用与一般FLUX模型使用的不一样,我们先来看下工作流:

我们可以看到,它使用了三个分词模型(左),那与我们平时只使用2个分词模型(右)有什么区别,我们来看下比较,

差别还是很明显的,接下来我们来下载这几个分词模型:

https://huggingface.co/city96/t5-v1_1-xxl-encoder-gguf/tree/main

老金列出的是GGUF版本t5-v1_1-xxl,大家根据自己需要选择一个下载就好咯,下载的模型到models/clip目录下

https://huggingface.co/zer0int/CLIP-GmP-ViT-L-14/tree/main

下载红框中的模型到models/clip目录下

https://huggingface.co/stabilityai/stable-diffusion-3.5-large/tree/main/text_encoders

下载红框中的模型到models/clip目录下

Flux Sigma模型出图速度比较慢,为了提升模型的出图速度,我们还需要使用两个加速LORA模型:

https://huggingface.co/ostris/OpenFLUX.1/tree/main

https://huggingface.co/alimama-creative/FLUX.1-Turbo-Alpha/tree/main

下载后放入models/loras目录下

现在可以出图咯,我们来看下生成的图像效果比较,分为未使用加速(左),使用turbo-alpha(中),使用OpenFLUX(右)

效果还是相当明显的,不用加速LORA的效果最好,使用turbo加速出图还是可以接受的,方便用于刷图。另外,作者介绍只训练了男性数据集,老金试了下女性角色,效果还是不错滴,也让老金对后续训练完女性数据集的模型充满期待。

最后,老金再给大家说一下Flux Sigma模型的几个设置:

  • 需要设置3个分词器模型,老金使用的是GGUF模型,大家可以根据自己机器的配置选择相应版本的模型。

  • 如果使用加速LORA的话,它们的权重各不相同,turbo模型为:1,openflux模型为:0.33

  • 使用加速LORA的话,步数为:8-16,如果不使用加速LORA的话,步数:50-60。

  • CFG为:2-4。

  • 负面提示词也是起作用的,大家可以根据需要填写

  • 如果要画小姐姐的话,需要比较复杂的提示词,仅少量几个单词,容易出鬼图。

赠人玫瑰,手留余香

▼▼▼▼点击复制下载链接后在APP中直接打开▼▼▼▼

👇👇👇👇👇👇👇👇👇👇👇

夸克网盘分享 (quark.cn)

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值