【ComfyUI工作流】Flux-IPA:效果惊艳!IPA基于10M数据F1专属风格迁移!补齐黑森林遗憾和空缺

FLUX.1-dev-IP-Adapter简介

近期InstantX团队发布了最新Flux的IP-Adapter模型:InstantX/FLUX.1-dev-IP-Adapter模型,这是一个基于Flux-DEV模型的IP-Adapter风格化组件。在之前的黑森林官方发布的风格化模型Flux Redux[ComfyUI]FluxRedux:超好玩创意灵感,一丝小遗憾!F1风格化溶图组件,黑森林官方下场亲手打造F1生态),这款模型并不算IP-Adapter模型,仅包含细微轻度的图像变化,因此提到有一丝小遗憾。就在黑森林团队发布第二天InstantX团队则补上了这一块空缺。今天文章我们将一起来体验这款IP-Adapter模型是否能补上Flux模型这块空缺?

InstantX/FLUX.1-dev-IP-Adapter模型在模型训中:新层被添加到38个单块19个双块中。同时采用了google/siglip-so400m-patch14-384 来编码图像(因其卓越的性能),与此同时还采用一个简单的MLPProjModel,包含2个线性层来进行投影。图像令牌数量设置为128。目前发布的模型是在10M开源数据集上训练的,批量大小为128,训练步骤为80K

演示案例

官方演示采用Shakker-Labs/FLUX.1-dev-LoRA-collections作为角色LoRA和对应默认提示生成。
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

FLUX.1-dev-IP-Adapter ComfyUI体验

在社区由**@Shakker-Labs官方已提供ComfyUI-IPAdapter-Flux插件支持,需要通过ComfyUI插件管理器Git安装**该插件,并下载对应模型(模型也可以文末网盘获取)。

ComfyUI-IPAdapter-Flux插件:https://github.com/Shakker-Labs/ComfyUI-IPAdapter-Flux.git

• InstantX-F.1-dev-IP-Adapter.bin:下载模型并放置目录ComfyUI/models/ipadapter-flux下,注意下载后rename一定为:InstantX-F.1-dev-IP-Adapter.bin。下载地址:https://huggingface.co/InstantX/FLUX.1-dev-IP-Adapter/tree/main

• sigclip_vision_patch14_384.safetensors:下载模型并放置目录ComfyUI/models/clip_vision下。下载地址:https://huggingface.co/black-forest-labs/FLUX.1-Depth-de(见评论)
在这里插入图片描述

在这里插入图片描述

Flux文生图工作流

Flux文生图感兴趣的同学可参考LIBLIB在线运行工作流:FLUX[续篇]:12B参数23G最大开源文生图模型,Dev版直出惊艳美图欣赏。本文涉及ComfyUI工作流和模型均可在LIBLIBAI上下载或在线运行体验:

• F.1-绮梦流光-水湄凝香:

https://www.liblib.art/modelinfo/134c6dd95aef48e98a22b24e003e026b

• 工作流-Flux文|图生图+LORA+提示反推一键切换工作流:

![在这里插入图片描述](https://i-blog.csdnimg.cn/direct/4fe89c48ed9049d5b53290857d74955e.png)

另外LIBLIBAI已支持本地客户端使用可首页(https://www.liblib.art)下载体验。

FLUX.1-dev-IP-Adapter工作流

FLUX.1-dev-IP-Adapter工作流已上传LIBLIB平台:

在这里插入图片描述

在这里插入图片描述

注意

  • FLUX.1-dev-IP-Adapter 在风格迁移上质量有显著提升,对于无明显全局图像影响(之前xlabs几款都存在图像影响)。

  • • 部分场景还需精确提示词配合参考风格图调试抽卡。

01. 动漫

jewelry, blue eyes, earrings, bare shoulders, bangs, sleeveless, large breasts, lips, parted lips, 1girl, breasts, cleavage, collarbone, pov eye contact, long hair, purple hair, sleeveless shirt, upper body, shirt, solo, sfw, twintails, looking to the side, looking at viewer, bare arms, original, indoors, eyebrow through hair, bare arms, pendant,shirt, bare shoulder, depth of field,, window, blue_eyes, day

在这里插入图片描述
在这里插入图片描述

02.牛逼风格

A 3d rendering shoot from a bird's eye view about a small wooden house perched on a rocky island surrounded by lush greenery and a waterfall, with the word "nb" spelled out in large, green grass letters in the center of the island. the island is situated in the middle of the image, surrounded by fluffy white clouds, and the sky is a bright, clear blue with a few wispy clouds scattered throughout. the house has a red roof and a small porch, and there are several trees surrounding it, adding to the natural beauty of the scene. the overall atmosphere is peaceful and serene, with a sense of serenity and tranquility.

在这里插入图片描述

在这里插入图片描述

03.人物写实

An Asian woman

在这里插入图片描述
在这里插入图片描述

04.插画风格

An anime style illustration

在这里插入图片描述
在这里插入图片描述

05.狐妖

An anime style woman, anthropomorphic nine-tailed fox

在这里插入图片描述
在这里插入图片描述

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值