[ComfyUI进阶教程] lcm+Lora+Controlnet工作流工作流

最新推荐文章于 2024-04-01 14:30:04 发布
最新推荐文章于 2024-04-01 14:30:04 发布
阅读量1.4k 收藏 1
点赞数 5
分类专栏： ComfyUI从入门到精通 文章标签： comfyui Controlnet AI作画 人工智能
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/joshesye/article/details/135713276
版权

这是一个使用了LCM+lora加载器+CN（depth+tile）的工作流。

工作流特性：

  1. LCM lora加载器，加快生成图片的时间。

  2. 配置了3个lora加载器，用来进行人物和风格设定。

  3. 提示词编辑器，预制了默认的动态提示词。

使用了2个预处理器：

1.tile用来进行风格控制

2.depth用来构图

点击生成图片，组成了右侧的图片。

本篇对应工作流：

lcm+CN工作流.json

网盘地址：专栏工作流--ControlNet

#comfyui #ControlNet #工作流 

细节控-AI先行者
关注
  • 5
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
订阅专栏
ComfyUI 基础教程（九）：LCM+绘图工作流
细节控-AI先行者的博客
12-27 1066
但是，实际上多轮测试后，会发现LCM的画质还是会比正常的lora生成的效果略差一些。以下是我使用SDXL模型，使用LCM-LORA的测试（16G显存），生成768X1024的图片,用时2.47S。它的特点是可以通过少量步骤推理合成高分辨率图像，使图像生成速度提升 2-5 倍，需要的算力也更少。从效果对比，生成图片的时间效率来说，ComFYui的SDXL模型使用效果和生成时间提升更佳。工作流名称：LCM工作流--ComfyUI-LCM-LoRA-txt2img。从2张图片的质量来说，画质还是可以的。
ComfyUI 基础教程（五）lora工作流设置
细节控-AI先行者的博客
12-15 2979
AI绘画离不开lora模型，学会lora工作流节点，才能灵活应用。
AI绘图:Controlnet在ComfyUI中的使用教程：提升Stable Diffusion可控性
04-01 1906
Controlnet是Stable Diffusion中一个至关重要的功能，它极大地增强了图像生成的可控性。通过引入额外的条件，Controlnet使我们能够更精确地控制生成的图像内容。本教程将详细介绍如何在ComfyUI中使用Controlnet，从而让你的创作过程更加灵活和精确。
生成只需要4step，像lora一样使用LCM
shadowcz007的博客
11-12 808
SDXL in 4 steps with Latent Consistency LoRAs在comfyui里实测LCM lora原先需要20步一张图，现在20步，4张图。comfyui最新版新增了lcm采样器，支持lcm lora的工作流。LCM lora模型下载：huggingface.co/latent-consistency/lcm-lora-sdxlLatent Consistency M...
[ComfyUI进阶教程] Controlnet预处理器节点安装和使用教程
细节控-AI先行者的博客
12-28 3747
虽然通过简单的提示词，在文生图和图生图中能生成不错的图片。但是如果要精准控图，实现人物姿势，深度图，画风迁移等进阶应用，就离不开ControlNet控图了。SD WEBUI实现精准控图，离不开ControlNet。高手进阶，AI绘画的灵魂。ControlNet的绘画模式是：先让用户输入一张参考图，AI根据指定的预处理模式，生成一张新图。常用 ControlNet预处理器包括：tile、openpos、depth、candy、lineart等。
Stable Diffusion学习笔记
weixin_42229060的博客
07-18 3140
它们包含了图像的各种细节，如人物的外观、背景、颜色和光线效果，以及图像的主题和风格。这些prompt的格式经常包含括号内的加权数字，用于指定某些细节的重要性或强调。StableDiffusion是一款利用深度学习的文生图模型，支持通过使用提示词来产生新的图像，描述要包含或省略的元素。),主要用来优化草图；艺术家的名字是一个非常强的风格修饰符，使用的时候要知道这个是什么风格。3.导出的图除去差异太大的行（hang)，留下差异不大的行(hang)点击下面的图可以下载需要的图（我们下载骨架图和手部canny图）
ComfyUI搭建使用教程
热门推荐
培根芝士的专栏
11-23 1万+
ComfyUI 是一个基于节点流程式的stable diffusion AI 绘图工具WebUI， 通过将stable diffusion的流程拆分成节点，实现了更加精准的工作流定制和完善的可复现性。ComfyUI因为内部生成流程做了优化，生成图片时的速度相较于WebUI有10%~25%的提升（根据不同显卡提升幅度不同），生成大图片的时候不会爆显存，只是图片太大时，会因为切块运算的导致图片碎裂。
Windows安装Stable Diffusion ComfyUI及问题解决记录（注意不是Stable Diffusion WebUI）
暂时先用这个名字
03-17 9682
如果你已经熟练掌握了webui，那么这个界面并不难理解，他更好的将流程展现在了我们面前，并且能实现局部绘画，拼接绘画。有些问题可以参考webui安装时遇到的，毕竟大家都是stable diffusion，很多时候主因是一样的。
comfyui安装指南及animaldiff使用
天风的人工智能博客
10-23 1829
教给大家一个思路，不会搭建工作流也无所谓，像comfyui官网提供了很多工作流，就像下面图和example，一般都会给出JSON工作流文件或者图片，直接下载拖入到comfyui中就自动生成了一样的工作流；加载animaldiff工作流，可能会提示缺少节点需要安装节点，安装完重启即可，还有下载v2模型和运动模型，看我上篇文章，放在下面对应位置。还有其他插件工作流，可以直接去官方代码也有类似文件，例如animaldiff，下载工作流直接加载就行。下载完依赖文件后，点击右上角设置，选择中文。
【ComfyUI插件】ComfyUI核心节点(三)
My_Weakness的博客
03-18 1367
ComfyUI的学习是一场持久战，当你掌握ComfyUI的安装和运行之后，会出现琳琅满目的节点，当各种各样的工作流映入眼帘，往往难以接受纷繁复杂的节点种类，本篇文章将以通俗易懂的语言，对ComfyUI的各种核心节点进行系统的梳理和参数的详解。
无线传输+lora+调通程序
10-09
stm32各个单片机都可使用，挂在两种传感器，四个环境因子，哈哈哈哈呵呵哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈O(∩_∩)O哈哈~
1+x Lora的库函数
01-09
1+x Lora的库函数
lora(IAR)透传.zip_STM32+lora_lora_lora模块_private6m6_透传
07-14
基于stm32 实现lora模块透传，可以利用lora实现长距离通信
基于ChatGLM-6B + LoRA的Fintune方案
12-26
一种平价的chatgpt实现方案，基于清华的 ChatGLM-6B + LoRA 进行finetune. 数据集: alpaca 准备 显卡: 显存 >= 16G (最好24G或者以上) 环境： python>=3.8 cuda>=11.6, cupti, cuDNN, TensorRT等深度学习环境 pip3 install -r requirements.txt 其中requirements.txt中的安装包bitsandbytes 建议安装0.41.2.post2这个版本，以前的版本可能会提示报错： bitsandbytes/libbitsandbytes_cpu.so: undefined symbol: cget_col_row_stats 训练 python finetune.py \ --dataset_path data/alpaca \ --lora_rank 8 \ --per_device_train_batch_size 6 \ --gradient_accumulation_steps 1 \ --max_step
STM32+LORA_lora_LORASTM32_STM32F103_STM32+lora_
09-29
基于stm32f103zet6的LORA源码
ComfyUI使用总结
金闪闪_Li的博客
10-24 7186
ComfyUI，它的主要特点是以工作流的形式来进行和展现基于stable diffusion模型的文生图和图生图的过程，拖拽式操作来链接各个节点，比如base model、vae、controlnet、lora、hypernet等。让整个生成过程更加清晰，易于理解。
基于ComfyUI的AnimateDiff的使用总结
金闪闪_Li的博客
10-30 4988
AnimateDiff是一个可以对文生图模型进行动画处理的实用框架。框架的核心是将新初始化的运动模块插入到冻结的文生图模型中，从而产生多样化和个性化的动画图像。简单的说，AnimateDiff是一个可以从文本到动画的框架
Controlnet在ComfyUI中的常见问题与解决方法
最新发布
04-01 1208
熟练地在ComfyUI中使用Controlnet，为你的Stable Diffusion创作过程带来更高的精确度和灵活性。不断实践和探索，你将能够充分发挥Controlnet的潜力，本文介绍使用Controlnet的常见问题，现象和解决方法，供大家查阅。
LLM + LoRA 微调
09-07
LLM LoRA微调是一种基于LoRA技术的微调方法，它在每个Transformer块中注入可训练层，通过减少需要训练参数的数量和降低GPU内存需求，从而实现了更快的速度和更少的计算量。研究发现，LLM LoRA微调的质量与全模型微调相当，并且适用于低延迟和低内存需求的场景。这种微调方法在LLM LoRA中的实现是通过LoRA基本原理和PEFT中的实现来完成的。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [LLM-项目详解-Chinese-LLaMA-AIpaca（一）：LLM+LoRa微调加速技术原理及基于PEFT的动手实践：一些思考和mt0...](https://blog.csdn.net/u013250861/article/details/131218221)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

细节控-AI先行者

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值