Stable Diffusion模型训练教程——最简流程模式

在接触到Stable Diffusion人物模型之后,有些同学想训练一款属于自己的模型,但是训练工具太多,参数五花八门,让人眼花缭乱。本文就从最简单的流程上来实现一次模型训练,简单到什么程度哪?除了几个点选项之外,不用输入任何参数,连触发提示词,学习率那些难懂的参数全都不写。

  1. 训练前准备

本训练教程,默认本地或者云端机器已经安装好完整的Stable Diffusion,已经安装dreambooth扩展,并且至少有一款基础模型。

  1. 处理训练素材

既然要训练,就要准备足够的训练素材,这里建议50张清晰高质量的照片,照片最好有各个角度。我在百度下载公开的杨幂照片,如下:

图片

格式,文件名,都关系不大,本着最简单的前提,我们现在不做任何人工处理。

然后我们打开sd的训练tab:

图片

这里让sd为我们做一次预处理,把刚才存储杨幂照片的文件夹地址填进入(源目录),再选择一个输出文件夹(目标目录)。然后设置统一处理的宽高,我这里设置为768(你保存的图像至少要大于768*768).

下面点选 blip和deepbooru任意一个,最简训练教程不需要管他们是干嘛的。

然后点击预处理

预处理进度走完以后,右侧会显示

图片

现在打开我们设置的输出文件夹,你会看到:

图片

现在你应该清楚预处理都做了什么,那就是把所有图像按比例处理为768*768,并且裁切掉比例外的部分,同时生成一份图片描述txt文件。

这样就会造成有些图片被切掉了头部

图片

这一类的照片可以选择直接删除,如果你的样品够多的话。

也可以选择手工处理下

图片

全都处理完以后,我们的out输出文件夹里都是比较完美的样本图片了

图片

这里的txt我们也不去处理它,最简流程嘛,多一点我们都不做。

到这一步,处理素材的工作就完成了。

  1. 新建模型

处理完素材之后,下一步就是创建一个你自己的模型

图片

打开dream booth选项卡,选择创建,给自己的模型取个名字,并且选择一个基础模型(这里可以选择一款你用着比较顺手的人像模型,如果你训练的是图片,banner等其他图片,也可以选择相应的icon,插画模型)。

顶部灰色框里的模型与本训练无关,可以不关注。

然后点击创建

  1. 训练

创建完模型之后,我们就来训练这个模型。

图片

选项卡切换到选择,选择刚才你创建的模型,在中间的设置选项里可以勾选一个使用lora。

往下拉一些,这三个选项:

图片

然后切换到概念tab

图片

点击训练向导-人物,这里他会做一些预设操作,不过我们不用关心。

图片

然后在数据集目录这里,填写我们之前输出的预处理图像out目录

到这一步,训练准备全部完成,点击训练按钮。

图片

训练进度开始走

根据不同的显卡,整个训练过程大概在30分钟到4小时之间

图片

当训练完成之后,你的模型这里刷新可以看到多出了test这个新的模型。

图片

输入一些你以前准备好的人像提示词,试一下。

  1. 后记

到这里,整个训练流程就结束了,我们没有去理解任何参数的作用,是一个简单粗暴的训练教程,模型质量只能说一般,但对于想快速拥有一个个人模型的同学,是个最快的过程。如果后面想更细致的优化模型,就要细致的去了解那些参数和功能,以及插件工具了。

  1. 常见报错

xformers未安装,是最容易报的错误,网上很多安装方式对新人都不友好,最简单的处理模式,就是在启动参数的时候直接安装

在你的启动命令后面加上 --reinstall-xformers --xformers

  1. 几张产出样品

就算非常完美的模型,也不是生产的每一张图都好用的,必须通过海量生产,来选择自己满意的作品,这里附几张样品图:

图片

图片

图片

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

1.stable diffusion安装包 (全套教程文末领取哈)

随着技术的迭代,目前 Stable Diffusion 已经能够生成非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替代,比如制作一个 logo 图片,画一张虚拟老婆照片,画质堪比相机。

最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!此外还带来了Mac版本,仅支持macOS 12.3或更高版本

在这里插入图片描述

2.stable diffusion视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入坑stable diffusion,科学有趣才能更方便的学习下去。

在这里插入图片描述

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果,这时则需要通过使用大量训练数据,调整模型的超参数(如学习率、训练轮数、模型大小等),可以使得模型更好地适应数据集,并生成更加真实、准确、高质量的图像。

在这里插入图片描述

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。

在这里插入图片描述

5.AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

  • 19
    点赞
  • 11
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值