前两天,Flux大名响彻了整个AI绘画圈子,在SD3之后,又出来一个质量非常不错的AI绘画模型。FLUX刚问世就收到大家的一致好评,甚至有人说赶超Midjourney V6。
01
介绍
Flux为啥这么厉害,让我们一探究竟。
Flux 由 Stable Diffusion 初创成员 Robin 打造,他离职后成立了BLack Forest Team,最近发布了全新的图像生成开源模型 FLUX.1。
模型一共分三款,包含pro版、dev版、schnell版。
其中Dev和Pro版本明显超过了SD3以及Midjourney V6和DALL-E 3。
给你们看看分数对比。
这三个版本说明:
-
Pro版本效果最好,但是闭源,API收费的。
-
Dev版本开源但是不可商用,至少需要24G显存运行。
-
Schnell版本开源可商用
如果你想要在线体验,也有在线的网站:
schnell :https://replicate.com/black-forest-labs/flux-schnell
dev:https://replicate.com/black-forest-labs/flux-dev
pro:https://replicate.com/black-forest-labs/flux-pro
目前comfyUI插件已经支持,今天就来教大家怎么安装并且使用,只能说AI变化太快了,越来越强。
02
安装介绍
目前ComfyUI最新版本已经兼容FLux模型了, 只需内核升级到最新即可体验。
显存太低的人本地估计玩不了,我本地电脑配置还行,这里体验下dev版本。
模型的话一共需要这几个,我提供了网盘地址,到时候直接下载吧。
这三个文件全部放到 ComfyUI/models/ 下面即可。
CLIP模型使用是和SD3系列一样的 t5xxl_fp16_e4m3fn.safetensors 和 clipl.safetensors,对了如果你内存超过32G,就用fp16,如果小于可以使用 t5xxl_fp8_e4m3fn.safetensors 来降低内存使用。
unet里面有2个文件 flux1-schnell.sft 和 flux1-dev.sft,分别对应dev和schnell版本,选一个使用就行。
VAE模型是对应一个重新训练的VAE。
内核一定要切换到最新的,也是用秋叶整合包的像我这里升级即可。
03
**使用介绍
**
完整工作流如下
UNET可以根据情况选择dev或者schnell,我这里用dev测试
CLIP这边的话,配置好的话,T5就选择fp16的,否则选择fp8
vae选择最新的ae.sft
采样器和调度器分别选择 euler和normal,选择其他出图会很丑,无法正常出图。
测试下来的话,首次加载时间很长,我大概用了100秒,第二次再出图就快多了,20-25秒左右。
图片尺寸我设置1024x768。
FLUX.1在图像细节、提示一致性、风格多样性和文本到图像合成的场景复杂性方面定义了新的最先进技术。
接下来我们来看看效果如何,分别从文字嵌入、人手优化、人像、科幻、风景、动物等多个风格来测试看看。
文字嵌入
三只熊猫构成的画面 左边是哥哥,穿着练功服,手里拿着一个牌子,上面写着’FLUX’ 中间是妹妹,穿着裙子,手里拿着一个牌子,上面写着’IS’ 右边是弟弟,穿着棒球服,手里拿着一个牌子,上面写着’GOOD’ 背景在小河边,后面是冰川
人手优化
一组三名妇女在市中心街道上拍摄的电影照片,她们举起双手举起相机
人像
桥装、白色连衣裙、花卉背景、优雅、全身白色、亚洲女性、高档、大花宠、柔和灯光、浪漫、梦幻、奢华、细致质感、宽裙、单色调色板、淡妆、梦幻蓝, 高品质图像, 空灵, 清晰对焦, 影楼照片, 复杂细节, 高度细致, 超真实, 高清, 专业摄影, 尼康相机, 高品质, 电影, 16K, 超高分辨率, 超细节,
科幻
亵渎, 杰作, 荒诞, 写实, 色差, 科幻, 机械化改造, 极其精细的cg, 不可能的衣服, 1girl, 成熟女性,{战斗姿态}, 机械关节, 超级机器, 巨乳, 窄腰, 宽臀, 粗大腿, 大长腿, 机械铠甲, 玻璃铠甲, 黑白古铜色衣服, 撕裂衣服, 破损, 发光衣服, 详细机器, 详细结构, 机械面罩, 机械护颈, 机械肩甲, 机械护臂, 机械护腕, 装甲靴, {面板}, {机械球体}, {闪电球}, {{探照灯}}, 手持武器, 严酷的天空, 严酷的气氛, {加农炮}, {霓虹灯刀片}, 市容, 损坏的建筑, 怪物, 神秘生物 , 广角
风景
可乐存在,天文园,天空,幻想,{{{巨大的木星}}},蓝色,{{{巨大的木星}}},{{{杰作}},{{最好的质量,超精细的插图,美丽细腻的水}},{{非常细腻的光}},星落,干净的天空,夜空,夜晚,景深,{{{{两个月亮}},巨人,Megaphobia,{{极其细致的CG统一8k壁纸}},{超细致},{极其细腻美丽}
动物
工蜂,无人机,{{{{{制作中带有女孩详细面孔的蜂王}}}}}},在蜂巢中,{{{{game_cg}}}},{{{{由著名艺术家}}} },{{非常详细}},{{杰作}},{{{质量最好}}},[蜂蜡],[蜂蜜],[蜂王浆],个展
卡通
(((杰作))),最好的品质,插图,(美丽详细的女孩),一个女孩,独奏,裸露的肩膀,扁平的胸,钻石和闪亮的眼睛,美丽的详细的冷脸,很长的蓝色和银色的头发,飘动的黑色羽毛, 波浪形的头发,黑白的袖子,金色和银色的流苏,女孩身后的(黑洞),镶嵌黑曜石的银色三重皇冠,(坐在)黑色((宝座)),(深度)的(领域)
04
总结
整体来说,测试下来效果还是很不错的,FLUX 比 SD3 强。
-
手部生成稳定,较少出现手脚畸形。
-
出图速度快,30秒内即可完成。
-
模型兼容性强:无论是二次元、人像、写实、还是风景风格,效果都很好。
写在最后
感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。