[ComfyUI进阶教程] lcm+Lora+Controlnet工作流工作流

最新推荐文章于 2024-09-19 11:16:59 发布
最新推荐文章于 2024-09-19 11:16:59 发布
阅读量2.2k 收藏 3
点赞数 5
分类专栏： ComfyUI从入门到精通 文章标签： comfyui Controlnet AI作画 人工智能
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/joshesye/article/details/135713276
版权
该教程详细介绍了如何利用LCM、Lora加载器和Controlnet（深度+瓦片）创建一个高效的工作流程。通过配置3个Lora加载器处理人物和风格设定，结合提示词编辑器与2个预处理器（用于风格控制和构图），实现了快速生成高质量图片的目标。该工作流文件为'lcm+CN工作流.json'，并提供了网盘链接。
摘要由CSDN通过智能技术生成

这是一个使用了LCM+lora加载器+CN（depth+tile）的工作流。

工作流特性：

  1. LCM lora加载器，加快生成图片的时间。

  2. 配置了3个lora加载器，用来进行人物和风格设定。

  3. 提示词编辑器，预制了默认的动态提示词。

使用了2个预处理器：

1.tile用来进行风格控制

2.depth用来构图

点击生成图片，组成了右侧的图片。

本篇对应工作流：

lcm+CN工作流.json

网盘地址：专栏工作流--ControlNet

#comfyui #ControlNet #工作流 

细节控-AI先行者
关注
专栏目录
订阅专栏
ComfyUI 基础教程（九）：LCM+绘图工作流
细节控-AI先行者的博客
12-27 1419
但是，实际上多轮测试后，会发现LCM的画质还是会比正常的lora生成的效果略差一些。以下是我使用SDXL模型，使用LCM-LORA的测试（16G显存），生成768X1024的图片,用时2.47S。它的特点是可以通过少量步骤推理合成高分辨率图像，使图像生成速度提升 2-5 倍，需要的算力也更少。从效果对比，生成图片的时间效率来说，ComFYui的SDXL模型使用效果和生成时间提升更佳。工作流名称：LCM工作流--ComfyUI-LCM-LoRA-txt2img。从2张图片的质量来说，画质还是可以的。
ComfyUI 基础教程（五）lora工作流设置
细节控-AI先行者的博客
12-15 4393
AI绘画离不开lora模型，学会lora工作流节点，才能灵活应用。
ComfyUI基础操作教学！小白入门必看！
JxyyzAI的博客
08-29 834
就像我们第一节拆解基本工作流那样，一张图片的生成是依次进行的，首先大模型节点运行选择合适的大模型，接着是到了提示词节点识别提示词，然后在K采样器生成，最后VAE编码输出，因此我们要放入的节点一定要在它发挥作用的位置。因此我们可以根据这个找上一个接点，发现正向提示词上也有条件，所以可以得出controlnet节点是接在正向提示词之后的。将节点逻辑从大模型到正向提示词到采样器，增加为从大模型到lora模型到正向提示词到采样器。例如我们要放入的lora模型节点，它肯定是在选择大模型之后的。
ComfyUI进阶篇：ControlNet核心节点
weixin_41384017的博客
09-15 274
前言： ControlNet_aux库包含大量的图片预处理节点，功能丰富，适用于图像分割、边缘检测、姿势检测、深度图处理等多种预处理方式。掌握这些节点的使用是利用ControlNet的关键，本篇文章将帮助您理解和学会使用这些节点。 目录 一、安装方法 二、模型下载 三、Segmentor节点 四、Lines节点 五、Color Pallete/Content Shuffle节点 六、OpenPo...
ComfyUI 使用 LoRA 极简工作流
z099164的博客
05-14 2771
ComfyUI的LoRA工作流相信大家都不陌生。开发者提供了大量基于默认节点功能搭建的工作流，其中就包括了如何使用LoRA。仅仅使用一个LoRA也许还比较简单。只需要在基本工作流的基础上，再添加一个LoRA加载器的节点即可。如果要添加多个LoRA，就需要往里面继续加入LoRA加载器。这使得工作流变得很长，丧失了优雅和高效。今天，我来介绍在ComfyUI中使用LoRA的极简工作流。如果只使用一个LoRA的话，只需要两个节点。如果你需要再添加多个LoRA的话，只需要再添加一个LoRA节点。
ComfyUI 完全入门：ControlNet 使用教程
京东科技开发者
05-31 753
今天继续给大家分享ComfyUI的入门必备技能：ControlNet。ControlNet 提供了十几种生成图片的控制方式，有的可以控制画面的结构，有的可以控制人物的姿势，还有的可以控制图片的画风，这对于提高AI绘画的质量特别有用；基于 ControlNet 的能力，炼丹师们可以将AI绘画拓展到很多的应用场景，比如艺术二维码、光影文字、线稿上色、老照片修复、图片风格转绘、IP图片创作等等。...
Comfyui之ControlNet的使用
拥抱AIGC，拥抱Stable Diffusion，拥抱Comfyui工作流
07-09 1743
Comfyui之ControlNet的使用
ComfyUI预处理器ControlNet简单介绍与使用（附件工作流）
菜鸟也学大数据的博客
07-07 1545
ControlNet 是一个很强的插件，提供了很多种图片的控制方式，有的可以控制画面的结构，有的可以控制人物的姿势，还有的可以控制图片的画风，这对于提高AI绘画的质量特别有用。接下来就演示几种热门常用的控制方式。
Comfyui之Lora的使用
拥抱AIGC，拥抱Stable Diffusion，拥抱Comfyui工作流
07-12 2376
Comfyui之LORA的使用
STM32+LORA_lora_LORASTM32_STM32F103_STM32+lora_
09-29
LoRa的工作频率通常在868MHz或915MHz的ISM频段，这允许它在非许可频谱上进行通信，降低了使用成本。其通信协议主要基于LoRaWAN（LoRa Wide Area Network），这是一种开放的物联网标准，定义了网络层和应用层的规范。...
[ComfyUI进阶教程] Controlnet预处理器节点安装和使用教程
细节控-AI先行者的博客
12-28 5395
虽然通过简单的提示词，在文生图和图生图中能生成不错的图片。但是如果要精准控图，实现人物姿势，深度图，画风迁移等进阶应用，就离不开ControlNet控图了。SD WEBUI实现精准控图，离不开ControlNet。高手进阶，AI绘画的灵魂。ControlNet的绘画模式是：先让用户输入一张参考图，AI根据指定的预处理模式，生成一张新图。常用 ControlNet预处理器包括：tile、openpos、depth、candy、lineart等。
【第7章】如何利用LoRA“增强个性化”？（简介/安装/工作流搭建/参数详解/多LoRA混用）ComfyUI基础入门教程
聚梦小课堂
06-12 381
在ComfyUI工作流中添加Lora节点，提升特定的艺术效果，内容涵盖：什么是Lora？Lora与大模型的区别与关系？Lora的下载与安装、动手搭建一个带有Lora节点的工作流、多lora混用、如何增强Lora效果、提示词权重、Lora触发词...
AI绘图的场景应用：文生图、图生图
qq_41314882的博客
03-15 2728
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
AI绘图:Controlnet在ComfyUI中的使用教程：提升Stable Diffusion可控性
04-01 4535
Controlnet是Stable Diffusion中一个至关重要的功能，它极大地增强了图像生成的可控性。通过引入额外的条件，Controlnet使我们能够更精确地控制生成的图像内容。本教程将详细介绍如何在ComfyUI中使用Controlnet，从而让你的创作过程更加灵活和精确。
【comfyui】40个工作流一次让你彻底掌握SD controlNet的使用场景(1)-线性处理器
bagell的博客
05-22 2039
Stable Diffusion 的 ControlNet 是一个控制预训练图像扩散模型的神经网络。它允许输入调节图像，然后使用该调节图像来操控图像生成。ControlNet 最近非常火，它和 Stable Diffusion 的结合使 Stable Diffusion 能够接受指导图像生成过程的条件输入，从而增强了 Stable Diffusion 的性能。使用 ControlNet 可以固定构图、定义姿势、描绘轮廓等，单凭线稿就能生成一张丰满精致的插画。
2024年SD ComfyUI零基础入门教程：Lora工作流搭建
Yu91an的博客
07-10 1119
本教程是 2024 年最新的SD ComfyUI入门指南，专为初学者设计，详细介绍了如何搭建Lora工作流程。通过逐步指导，让您轻松掌握SD ComfyUI的高级功能，提升AI绘图的精准度和创造力。模型存放位置在“ComfyUI_windows_portable\ComfyUI\models\loras”目录下，如果你是和 Web UI 共用的模型，那就放在“sd-webui\models\Lora”目录下。如果不知道怎么与WebUI共享模型的小伙伴可以看我们的第二节有详细介绍。
使用 ComfyUI 进行本地 FLUX.1 LoRA 的训练
最新发布
2401_84760719的博客
09-19 1128
最近在尝试进行 FLUX.1 的 LoRA 训练，以前没有 SD1.5 和 SDXL 的训练经验，网上看到 FLUX.1 的 LoRA 炼起来效果比较好，就试了几种方案来看看效果。这个文章更多是介绍如何使用 ComfyUI 来进行 LoRA 的训练，一些训练的参数我也还在调试中，后面会陆续更新。收集和完善图像数据集选择训练工具设置训练参数并开始训练测试模型。
ComfyUI如何高效率使用多Lora
菜鸟也学大数据的博客
07-07 547
【代码】ComfyUI如何高效率使用多Lora。
含有comfyui的B-lora的工作流
08-30
ComfyUI 是一个用于文本到图像模型（如 Stable Diffusion）的用户友好的可视化脚本编辑器。它允许用户通过可视化的节点和连接创建复杂的工作流，而不需要编写代码。B-Lora 是基于 LoRA (Low-Rank Adaptation) 的一种技术，可以对预训练的文本到图像模型进行微调，以生成特定风格或特性的图像。 含有 ComfyUI 的 B-Lora 工作流通常遵循以下步骤： 1. 首先，你需要获取一个预训练的文本到图像模型，比如 Stable Diffusion 的基础模型。 2. 使用 B-Lora 方法对这个模型进行微调。这通常涉及准备一个包含目标风格或特性的数据集，并运行 LoRA 微调过程。 3. 微调完成后，将生成的 B-Lora 权重文件加载到 ComfyUI 中。 4. 在 ComfyUI 中创建新的工作流，添加模型节点，并将 B-Lora 权重文件作为模型加载。 5. 通过添加其他节点（如文本编码器、图像解码器、修改器等）来丰富工作流，以实现更复杂的功能。 6. 通过调整节点参数和连接，进行实验以生成想要的图像。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

细节控-AI先行者

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值