【Stable Diffusion】（基础篇七）—— lora

lora

本系列博客笔记主要参考B站nenly同学的视频教程，传送门：B站第一套系统的AI绘画课！零基础学会Stable Diffusion，这绝对是你看过的最容易上手的AI绘画教程 | SD WebUI 保姆级攻略_哔哩哔哩_bilibili

除了大模型和VAE之外，SD中还有embedding模型和lora模型，这两种模型体积都很小，他们对于画面的调节能力不和大模型一样，但也可以实现画风改变和特殊物品形象的精确定义，本文将带你了解lora 。

lora，低秩适应模型（Low-Rand Adaptation Models），比起书签更像彩页，一般被用于定义一个特定角色、形象特征，或者是画风。可以更加准确的定义大字典中没有的词条含义，在描述特定的物品或形象的时候，lora比embedding更常用且效果更好。

lora文件的后缀和大模型一致，为ckpt或safetensors 。但是和大模型相比，lora的文件大小不会超过200Mb ，lora文件可以随意重命名（纯英文字符），LoRa的文件位置：SD根目录下的/models/lora，使用方法，在提示词中,<Lora:lora名:权重>（权重建议在0.5-0.8之间），以及同时使用作者提供的建议提示词。

为了对比之前的效果，让我们在C站找一个Dva的lora模型，将其下载并移动到本地的lora目录下面，然后画一张Dva

masterpiece, best quality,1girl, d.va (overwatch), solo, long hair, whisker markings, bodysuit, brown hair, facial mark, gloves, breasts, brown eyes, pilot suit, cowboy shot, headphones, white gloves, medium breasts, swept bangs, skin tight, animal print, bangs, bunny print, ribbed bodysuit, facepaint, pink lips,(grey background:1.2),simple background, <lora:dva:1>
Negative prompt: NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbid:1.21), (mutilated:1.21), (tranny:1.331), mutated hands, (poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra limbs, (disfigured:1.331), (missing arms:1.331), (extra legs:1.331), (fused fingers:1.61051), (too many fingers:1.61051), (unclear eyes:1.331), lowers, bad hands, missing fingers, extra digit,bad hands, missing fingers, (((extra arms and legs))),
Steps: 20, Sampler: DPM2 a Karras, CFG scale: 7, Seed: 3003104547, Size: 500x800, Model hash: d8722b4a4d, Model: 2.5D：neverendingDreamNED_bakedVae, Denoising strength: 0.4, Clip skip: 2, ENSD: 31337, Hires upscale: 1.5, Hires upscaler: R-ESRGAN 4x+, Lora hashes: "dva: 6a119c96619d", Version: v1.5.2

webUI的使用

embedding和lora都可以在同一次的绘画中使用多个，但每次去查找激活词或者lora的名字是非常麻烦的事情，webUI中，图形化的界面可以帮助我们更快地调用embedding和lora。

点击生成按钮下方的第三个按键，会打开一系列的模型选项，包括大模型，embedding和lora，在这里的卡片点击右上角可以进行设置，可以对模型进行一些设置，包括可以对lora模型的关键词等进行设置，设置好之后，点击一下卡片就可以激活调用了。

我们还可以给不同的模型设置封面图，可以更加直观的看到模型的效果，先利用该模型跑图出来，然后点击卡牌名字上方的按钮进行设置缩略图，或者在模型文件夹中使用一张同名的jpg/png图片

在使用多个lora模型时，画风的影响因子应该小于人物的影响因子，服饰类的lora影响因子也不宜过高