FLUX.1-dev-IP-Adapter简介
近期InstantX团队发布了最新Flux的IP-Adapter模型:InstantX/FLUX.1-dev-IP-Adapter模型,这是一个基于Flux-DEV模型的IP-Adapter风格化组件。在之前的黑森林官方发布的风格化模型Flux Redux([ComfyUI]FluxRedux:超好玩创意灵感,一丝小遗憾!F1风格化溶图组件,黑森林官方下场亲手打造F1生态),这款模型并不算IP-Adapter模型,仅包含细微轻度的图像变化,因此提到有一丝小遗憾。就在黑森林团队发布第二天InstantX团队则补上了这一块空缺。今天文章我们将一起来体验这款IP-Adapter模型是否能补上Flux模型这块空缺?
InstantX/FLUX.1-dev-IP-Adapter模型在模型训中:新层被添加到38个单块和 19个双块中。同时采用了google/siglip-so400m-patch14-384 来编码图像(因其卓越的性能),与此同时还采用一个简单的MLPProjModel,包含2个线性层来进行投影。图像令牌数量设置为128。目前发布的模型是在10M开源数据集上训练的,批量大小为128,训练步骤为80K。
演示案例
官方演示采用Shakker-Labs/FLUX.1-dev-LoRA-collections作为角色LoRA和对应默认提示生成。
FLUX.1-dev-IP-Adapter ComfyUI体验
在社区由**@Shakker-Labs官方已提供ComfyUI-IPAdapter-Flux插件支持,需要通过ComfyUI插件管理器Git安装**该插件,并下载对应模型(模型也可以文末网盘获取)。
• ComfyUI-IPAdapter-Flux插件:https://github.com/Shakker-Labs/ComfyUI-IPAdapter-Flux.git
• InstantX-F.1-dev-IP-Adapter.bin:下载模型并放置目录ComfyUI/models/ipadapter-flux下,注意下载后rename一定为:InstantX-F.1-dev-IP-Adapter.bin。下载地址:https://huggingface.co/InstantX/FLUX.1-dev-IP-Adapter/tree/main
• sigclip_vision_patch14_384.safetensors:下载模型并放置目录ComfyUI/models/clip_vision下。下载地址:https://huggingface.co/black-forest-labs/FLUX.1-Depth-de(见评论)
Flux文生图工作流
Flux文生图感兴趣的同学可参考LIBLIB在线运行工作流:FLUX[续篇]:12B参数23G最大开源文生图模型,Dev版直出惊艳美图欣赏。本文涉及ComfyUI工作流和模型均可在LIBLIBAI上下载或在线运行体验:
• F.1-绮梦流光-水湄凝香:
https://www.liblib.art/modelinfo/134c6dd95aef48e98a22b24e003e026b
• 工作流-Flux文|图生图+LORA+提示反推一键切换工作流:

另外LIBLIBAI已支持本地客户端使用可首页(https://www.liblib.art)下载体验。
FLUX.1-dev-IP-Adapter工作流
FLUX.1-dev-IP-Adapter工作流已上传LIBLIB平台:
注意:
-
• FLUX.1-dev-IP-Adapter 在风格迁移上质量有显著提升,对于无明显全局图像影响(之前xlabs几款都存在图像影响)。
-
• 部分场景还需精确提示词配合参考风格图调试抽卡。
01. 动漫
jewelry, blue eyes, earrings, bare shoulders, bangs, sleeveless, large breasts, lips, parted lips, 1girl, breasts, cleavage, collarbone, pov eye contact, long hair, purple hair, sleeveless shirt, upper body, shirt, solo, sfw, twintails, looking to the side, looking at viewer, bare arms, original, indoors, eyebrow through hair, bare arms, pendant,shirt, bare shoulder, depth of field,, window, blue_eyes, day
02.牛逼风格
A 3d rendering shoot from a bird's eye view about a small wooden house perched on a rocky island surrounded by lush greenery and a waterfall, with the word "nb" spelled out in large, green grass letters in the center of the island. the island is situated in the middle of the image, surrounded by fluffy white clouds, and the sky is a bright, clear blue with a few wispy clouds scattered throughout. the house has a red roof and a small porch, and there are several trees surrounding it, adding to the natural beauty of the scene. the overall atmosphere is peaceful and serene, with a sense of serenity and tranquility.
03.人物写实
An Asian woman
04.插画风格
An anime style illustration
05.狐妖
An anime style woman, anthropomorphic nine-tailed fox
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
对于0基础小白入门:
如果你是零基础小白,想快速入门AI绘画是可以考虑的。
一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案
包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍
👉stable diffusion新手0基础入门PDF👈
(全套教程文末领取哈)
👉AI绘画必备工具👈
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉AI绘画基础+速成+进阶使用教程👈
观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末
👉12000+AI关键词大合集👈
这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
】
