开发一个训练LORA的WebUI

已于 2023-09-19 09:53:55 修改
阅读量460 收藏 3
点赞数
分类专栏： AI绘图 文章标签： stable diffusion LORA 文生图 AI绘画 LORA训练
于 2023-09-18 23:22:27 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40660408/article/details/133000662
版权

文章目录

效果

在这里插入图片描述

原理

基于开源项目kohya-ss/sd-scripts增加了Gradio UI，精简了训练参数，更适合初级“炼丹宝宝”的炼丹炉！
核心思想还是比较简单的，通过Gradio UI来收集设置的训练参数，并通过python的 subprocess 库来执行命令 accelerate launch --xxx，最终达到训练LORA的效果。

界面参数说明

基础模型：后缀为.ckpt或者.safetensors的模型，也可以指定huggingface中的模型id（需要可以顺利访问huggingface）

数据集：训练数据集的文件夹在kohya-ss/sd-scripts当前的版本中必须这样指定：
这里 image（当然名字随意，但最好是英文，且不要有空格之类的特殊服务）文件夹作为数据集图片的根目录，子目录需要以数字下划线开头，该数字将影响训练的总步数，即训练的 总步数 = 图片数量 * 子目录的数字前缀

了解本专栏 订阅专栏 解锁全文 超级会员免费看
那个小白猿
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
[linux-sd-webui]api化之训练lora
liguandong
03-31 4145
accelerate==0.15.0 应该只能在虚拟环境中，在train.sh中把accelerate launch --num_cpu_threads_per_process=8换成python。lora训练是需要成对的文本图像对的，需要准备相应的训练数据。scikit-image==0.14 版本高了会报错。这里面有个skimage的版本问题，会报错。使用deepbooru生成训练数据。2.lora在linux上环境。3.sh train.sh训练。lora的训练使用的文件是。
【AI绘画】《超入门级教程：训练自己的LORA模型》，MM超爱的萌宠图片实战
艰难困苦，玉汝于成。
07-23 3240
SD-Trainer：是stable diffusion进行lora训练的webui，有了SD-Trainer，只需要少许图片，每个人都能够方便快捷地训练出属于自 己的stable diffusion模型，可以让图片按照你的想法进行呈现。
什么是LoRA模型，如何使用和训练LoRA模型？你想要的都在这！
热门推荐
yang7711的博客
05-29 2万+
LoRA的全称是，可以理解为stable diffusion（SD)模型的一种插件，和hyper-network，controlNet一样，都是在不修改SD模型的前提下，利用少量数据训练出一种画风/IP/人物，实现定制化需求，所需的训练资源比训练SD模要小很多，非常适合社区使用者和个人开发者。LoRA最初应用于NLP领域，用于微调GPT-3等模型（也就是ChatGPT的前生）。
SD-如何训练自己的Lora模型
chtw的博客
05-15 3470
尝试过mac和Ubuntu，装上后都会有问题Windows按照官方步骤安装即可。
训练Stable Diffusion(SD) Lora模型巨详细教程 赛博丹炉/青龙脚本/秋叶云端使用教程 主用赛博丹炉（道玄）巨小白巨啰嗦，全是干货和踩过的坑
m0_59805198的博客
12-21 9456
试了很多的sd训练，尤其是sd的lora的训练，问题一大堆，现在写个博客汇总一下。
Stable Diffusion 使用lora-scripts WebUI训练LoRA模型
Mr数据杨
07-06 4777
如果对代码使用有困难的小伙伴可以直接使用WebUI版的LoRA模块进行训练操作。不管是训练人物，场景，风格，还是服装都是一套通用的模式，仅仅是使用不同的数据集得到的结果不同。
【保姆级教程】Linux上部署Stable Diffusion WebUI和LoRA训练，拥有你的专属图片生成模型
u010522887的专栏
05-03 1915
本文详细介绍了如何在Linux系统上部署Stable Diffusion WebUI，首先介绍了Stable Diffusion和LoRA模型的基本概念，然后完成WebUI的下载、安装和配置。 在部署过程中，作者分享了解决常见问题的方法，文章的后半部分专注于LoRA模型的训练，包括准备训练数据集、修改训练脚本和启动训练过程。作者提供了详细的命令和步骤，以帮助读者训练自己的LoRA模型，并将其集成到Stable Diffusion WebUI中。
Stable Diffusion+ControlNet+Lora 指导AI+艺术设计的WebUI全流程使用教程
m0_46339652的博客
04-07 5215
设计师们往往对于新出的绘画工具上手比较艰难，本文针对目前比较火热的Stable Diffusion+ControlNet指导AI艺术设计的工具使用进行全面讲解。很多人会有预感，未来要么设计师被图形学程序员取代，要么会使用AI工具的设计师取代传统设计师，2023年开始，AI辅助设计甚至主导设计已经成了司空见惯的现象。软硬件环境：OS: Ubuntu 20.04(Stable Diffusion开发需要Linux 环境，纯使用Web工具也可在WIndows下运行)11.7。
stable diffusion webui lora模型
04-07
stable diffusion webui lora模型 stable diffusion webui lora模型 stable diffusion webui lora模型 stable diffusion webui lora模型 stable diffusion webui lora模型 stable diffusion webui lora模型 stable ...
lora训练ui界面工具应用SD-Scripts项目源码
08-10
SD-Scripts是一个用于训练模型的项目，它使用了一个基于pyside6的用户界面(UI)，以便更流畅地进行模型训练的过程。 SD-Scripts项目该项目提供了一些用于训练模型的Python脚本，这些脚本可能涉及数据预处理、模型...
如何使用和训练LoRA模型？以及常见lora资源
08-09
由于GPT参数量超过千亿，训练成本太高，因此LoRA采用了一个办法，仅训练低秩矩阵（low rank matrics），使用时将LoRA模型的参数注入（inject）SD模型，从而改变SD模型的生成风格，或者为SD模型添加新的人物/IP。...
Stable Diffusion webUI LORA模型（Yae Miko - Realistic Genshin）
03-14
注意：使用additional-network webui插件来使用我的lora设置。 txt2img 的推荐权重 - 0.45-0.75，更高的权重可能会导致生成坏脸。 我认为如果您在未经许可的情况下使用真人面部制作任何作品/Loras/嵌入是违法的。 ...
LoRa训练模型、技术应用
08-04
例如，您可能想要训练一个模型来预测某个地区的 LoRa 信号强度，并将该模型的输入设置为 LoRa 信号的测量数据，输出设置为信号强度。 2. 收集数据：收集足够的的数据来训练您的模型。您可以从 LoRa 节点收集数据，...
【Stable Diffusion 3】本地部署SD3详细教程
G2Esports_NiKo的博客
06-19 1132
进入之后是这样的页面，如果你没有登录，可以点击右上角进行登录（登录之后才能下载SD3的模型！！！）
深入探索Stable Diffusion：从原理到应用的全面解析
06-19 1003
Stable Diffusion是一种用于图像生成和转换的先进技术，它在人工智能和计算机视觉领域引起了广泛关注。作为一种扩散模型，Stable Diffusion能够生成高质量、逼真的图像，并且在处理图像去噪和超分辨率等任务上表现出色。本文将深入探讨Stable Diffusion的理论基础、数学原理、算法实现、实际应用以及其在未来的发展潜力，帮助读者全面理解和掌握这一强大的技术。
Stable Diffusion文生图模型训练入门实战（完整代码）
SoulmateY的博客
06-17 961
（SD1.5）是由Stability AI在2022年8月22日开源的文生图模型，是SD最经典也是社区最活跃的模型之一。以SD1.5作为预训练模型，在火影忍者数据集上微调一个火影风格的文生图模型（非Lora方式），是学习的入门任务。显存要求 22GB左右在本文中，我们会使用模型在数据集上做训练，同时使用监控训练过程、评估模型效果。
stable diffusion指最全详解图解
嫦娥妹妹等等我的博客
06-17 410
!!!!!
stable diffusion 局部重绘 reference-only api 接口调试
最新发布
appearappear的博客
06-19 447
webUI api payload 插件生成的接口参数不准确，reference-only 的image不是对象，就是不同字符串字段，直接传，不是套image。看 stable diffusion 控制台输出，说用上了reference-only。综上，那个插件参数不确定，应直接看插件的源码，看它接受什么参数。如果 image 传岔劈了，控制台不会提示用了这个插件。正确 "image":xxxxxx。
自己动手训练LoRA
08-27
自己动手训练LoRA是指通过实践和操作来学习和训练LoRA技术。根据引用中提到的《AI 研发提效研究：自己动手训练 LoRA》的内容，其中包含了Llama（Alpaca LoRA）模型和ChatGLM（ChatGLM Tuning）相关Lora的训练。具体的训练内容包括用户故事生成、测试代码生成、代码辅助生成、文本转SQL、文本生成代码等。这些训练内容可以帮助学习者更好地理解和应用LoRA技术。为了更好地掌握LoRA，可以先熟悉其基本原理和PEFT中的实现，然后进行自己动手实践，通过实践来加深对LoRA的理解。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [LLaMA-AIpaca（一）：LLM+LoRa微调加速技术原理及基于PEFT的动手实践：一些思考和mt0-large+lora完整案例](https://blog.csdn.net/u013250861/article/details/131218221)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* [《AI 研发提效研究：自己动手训练 LoRA》包含 Llama （Alpaca LoRA）、ChatGLM 相关 Lora 训练](https://download.csdn.net/download/qq_35831906/88237971)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

那个小白猿

讨杯可乐

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值