Stable Diffusion教程：LoRA模型

AI绘画月月

于 2025-05-10 21:52:43 发布

阅读量878

点赞数 8

文章标签： stable diffusion AI作画 AI 人工智能 comfyui

本文链接：https://blog.csdn.net/2401_84760719/article/details/147859779

版权

LoRA模型是一种微调模型，它不能独立生成图片，常常用作大模型的补充，用来生成某种特定主体或者风格的图片。

下载模型

在模型下载网站，如果模型是LoRA模型，网站会特别标识出来。以 liblib.ai为例：

模型左上角会有一个模型类型的标记，CHECKPOINT代表大模型，LORA代表这是一个LoRA模型。

点击进入模型详情之后，我们可以看到它的一些介绍，以及下载按钮。注意看下图我标出来的这几个地方：

1、下载按钮：点击即可下载，可能需要先登陆。LoRA模型文件一般不大，几十M到几百M不等。

2、基础算法：LoRA模型适配的大模型版本，常见的就是
1.5 和 XL。如果是 1.5，那么搭配的大模型也需要是 1.5 的模型，而不能是 XL 的模型。大模型的算法版本我们也可以在模型的详情页面上找到。

3、触发词：在提示词中包含这些词可以在生成图片中强调LoRA模型提供的独特主体或风格，这些触发词有时候不是必须的，但是建议写到提示词中，以稳定出图效果。

4、模型发布者提供的一些LoRA模型的使用说明。

5、模型发布者提供的使用当前LoRA模型生图的参数，包括提示词、采样器、采样步数、随机种子等等，使用完全一致的生图参数可以生成完全一样的图片。

在页面的下方还有其它爱好者使用这个模型的一些返图，以及图片对应的生成参数，你可以直接拿来主义。

使用模型

安装模型

我们需要把下载的模型放到 Stable Diffusion WebUI 的 LoRA 模型的文件夹下边。

<stable-diffusion-webui>/models/Lora



  * 1
  * 2

注意替换为你的 SD WebUI 安装目录，然后重启 Stable Diffusion WebUI。

如果部署成功，我们可以在“文生图”或者“图生图”页面的“低秩微调模型(LoRA)”中看到刚刚上传的模型。

使用模型

使用模型就是在提示词中引用模型，格式是：

lora:模型的名字:模型的权重

模型的名字和模型的文件名不一定相同，我们可以在“低秩微调模型(LoRA)”中点击这个模型，WebUI就会自动在提示词中增加对这个模型的引用。

模型的权重越高生成图片时越贴近模型提供的主体或者风格，权重的取值范围是：0-1。

以下是不同权重时的效果展示：

生成图片时可以同时使用多个LoRA模型，最终效果会综合多个模型的风格。

训练LoRA模型

LoRA模型训练成本不高，往往只需要几十张图片就能训练出比较好的效果，广泛用于在生成图片时强化特定事物，比如某个高级脸、某种穿搭风格、某种绘画风格等等，经常用来做模特换衣、插画生产等，比较方便普通用户试玩。

针对各位AIGC初学者，这里列举了一条完整的学习计划，感兴趣的可以阅读看看，希望对你的学习之路有所帮助，废话不多说，进入正题：

请添加图片描述

目标应该是这样的：

第一阶段（30天）：AI-GPT从入门到深度应用

该阶段首先通过介绍AI-GPT从入门到深度应用目录结构让大家对GPT有一个简单的认识，同时知道为什么要学习GPT使用方法。然后我们会正式学习GPT深度玩法应用场景。

-----------

GPT的定义与概述
GPT与其他AI对比区别
GPT超强记忆力体验
万能GPT如何帮你解决一切问题？
GPT表达方式优化
GPT多类复杂应用场景解读
3步刨根问底获取终极方案
4步提高技巧-GPT高情商沟通
GPT深度玩法应用场景
GPT高级角色扮演-教学老师
GPT高级角色扮演-育儿专家
GPT高级角色扮演-职业顾问
GPT高级角色扮演-专业私人健身教练
GPT高级角色扮演-心理健康顾问
GPT高级角色扮演-程序UX/UI界面开发顾问
GPT高级角色扮演-产品经理
GPT高级技巧-游戏IP角色扮演
GPT高级技巧-文本冒险游戏引导
GPT实操练习-销售行业
GPT实操练习-菜谱推荐
GPT实操练习-美容护肤
GPT实操练习-知识问答
GPT实操练习-语言学习
GPT实操练习-科学减脂
GPT实操练习-情感咨询
GPT实操练习-私人医生
GPT实操练习-语言翻译
GPT实操练习-作业辅导
GPT实操练习-聊天陪伴
GPT实操练习-育儿建议
GPT实操练习-资产配置
GPT实操练习-教学课程编排
GPT实操练习-活动策划
GPT实操练习-法律顾问
GPT实操练习-旅游指南
GPT实操练习-编辑剧本
GPT实操练习-面试招聘
GPT实操练习-宠物护理和训练
GPT实操练习-吸睛爆款标题生成
GPT实操练习-自媒体爆款软件拆解
GPT实操练习-自媒体文章创作
GPT实操练习-高效写作推广方案
GPT实操练习-星座分析
GPT实操练习-原创音乐创作
GPT实操练习-起名/解梦/写诗/写情书/写小说
GPT提升工作效率-Word关键字词提取
GPT提升工作效率-Word翻译实现
GPT提升工作效率-Word自动填写、排版
GPT提升工作效率-Word自动纠错、建议
GPT提升工作效率-Word批量生产优质文章
GPT提升工作效率-Excel自动化实现数据计算、分析
GPT提升工作效率-Excel快速生成、拆分及合并实战
GPT提升工作效率-Excel生成复杂任务实战
GPT提升工作效率-Excel用Chat Excel让效率起飞
GPT提升工作效率–PPT文档内容读取实现
GPT提升工作效率–PPT快速批量调整PPT文档
GPT提升工作效率-文件批量创建、复制、移动等高效操作
GPT提升工作效率-文件遍历、搜索等高效操作
GPT提升工作效率-邮件自动发送
GPT提升工作效率-邮件自动回复
GPT接入QQ与QQ群实战
GPT接入微信与微信群实战
GPT接入QQ与VX多用户访问实战
GPT接入工具与脚本部署实战

第二阶段（30天）：AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习，首先通过了解AI绘画定义与概述，AI绘画的应用领域，PAI绘画与传统绘画的区别，AI绘画的工具分类介绍的基本概念，以及AI绘画工具Midjourney、Stable Diffusion的使用方法，还有AI绘画插件和模板的使用为我们接下来的实战设计学习做铺垫。