Stable Diffusion插件：EasyPhoto之Lora训练、AI写真、AI视频、AI换装！

前言

大家好，我是每天分享AI应用的Lison！

今天给大家分享一个特别强大的Stable Diffusion插件：EasyPhoto，这个插件一直在迭代，从最开始的AI写真，然后是AI视频，到最近的AI换装，能力一直在持续增强。

这个插件的基础能力是Lora训练，只需要5-20张特定人物或者场景的照片，不需要对图片进行任何格式化和打标的处理，也不需要理解各种复杂的参数，就可以生成一个独特的Lora模型；然后基于这个模型，我们就可以生成特定形象的照片、视频，可以文生图（视频），也可以图生图（视频）。

下面是我的效果展示，人物形象来自寡姐，最左边这张是原图，右边两张是生成的图片。效果还不错，最有特色的就是寡姐的这个小鼻子，模仿的惟妙惟肖。

本文涉及的工作流和插件，需要的朋友请扫描免费获取哦

安装插件

进入Stable Diffusion WebUI的插件管理页面，选择“从网址安装”，输入插件地址，点击“安装”即可。

这个插件会使用很多的模型，不过大家不用担心模型下载速度，因为下载链接都是阿里云的，速度会很快。

但是大家要考虑下硬盘空间，最好准备20G的空闲硬盘空间。

安装成功之后，重启WebUI，就能在一级菜单中看到EasyPhoto了。

训练Lora

如下图所示，首先上传5-20张用来训练模型的图片，可以去百度图片上下载；然后需要一个基础模型，最好是和训练图片的风格搭配的，训练人物用默认的这个也可以，它会自动下载模型；最后点击“Start Traning”开始训练，这个过程需要的时间可能比较长，可能需要20分钟，请耐心等待。其它参数使用默认的即可，当然如果你想调整，可以看我这篇文章：LoRA模型训练

训练成功之后，会显示：The training has been completed.

除了训练人物，我们还可以训练场景，方便生成时让人物出现在不同的场景中，比如朋克场景、室内场景、圣诞场景、新年场景等，训练场景时同样需要包含人物在训练图片中，只不过换成了场景不怎么变、人物多变。

生成图片

我们首先来看下图生图，这其实是个AI写真的功能，可以换掉图片中的人脸。我们可以使用插件自带的模版，也可以上传你认可的照片，这里选择一张肖像照片。

下边还有一些生成参数：

• 一个生成图片用的大模型，需要和上边选择的参考图片风格保持一致。

• 基于预训练的大模型（Infer with Pretrained Lora）、基于IP-Adapter ControlNet（Infer with IPA only，这种方法不需要预训练的Lora模型）。

如果选择“Infer with Pretrained Lora”，需要设置下边的参数：

• 如果图片中有多张脸需要替换，可以使用“Num of Faceid”来指定要替换的脸的数量，最多替换5张。

• “User_x id”用来选择上一步训练的Lora模型。

如果选择“Infer with IPA only”，则需要上传一张照片，生成的图片中会使用这张照片中的人脸，我们还可以设置ControlNet的权重，设置的权重越高，生成图片中的人脸越靠近这里上传的照片。

使用预训练模型生成图片的效果如下图所示：

文生图和图生图的参数有些差别，如下图所示，依次是：提示词，选择场景Lora（插件会自带一些，我们也可以自己训练场景Lora），图片的分辨率，姿势控制方式、生成图片用的基础模型、人脸的来源（预训练Lora、IP-Adapter控制器）。

生成视频

EasyPhoto生成视频使用的是AnimateDiff，支持文生图、图生图和视频生视频。

先看视频生成效果：

文生视频的一些参数设置：既然是文生视频，这里需要一些提示词，另外还可以通过上传一个视频来控制生成视频的的人物动作。注意EasyPhoto中生成视频时必须使用上文提到的预训练Lora模型。

点开高级设置，还有一些对生成视频影响比较大的参数。

Prompt 提示词：就是Stable Diffusion生成图片的提示词，可以用来控制一些图片效果。

视频帧数：Video Max num of frames 是视频的全部帧数，Video Max fps 是每秒帧数，Video Save as 是保存成gif还是mp4。

Lora模型的权重：Video Lora Weights of User id 是生成图片时Lora模型的权重。

图生视频的一些设置：参考图可以基于一张图片，也可以从一张图片过渡到另一张图片。提示词要写一下，最好是描述动作的。图片重绘度要设置的小一点，避免生成图片变化太多。

下面是官方给出的一个图片过渡的效果展示：

视频生成视频的设置：这个设置比较简单，上传一个参考视频，生成的视频会使用此视频中的动作；选择合适的生图模型，最后选择之前预训练的Lora模型。

换装

点击“Virtual Try On”进入换装模块。

首先在这里上传一张要换装的图片，用画笔涂抹要换装的区域，或者上传一张模版图片。

然后在这里选择或者上传要使用的服装。

这个换装的效果不是特别稳定，如果效果不太好，可以多试几次。

这是一位SD资深大神整理的，100款Stable Diffusion超实用插件，涵盖目前几乎所有的，主流插件需求。

全文超过4000字。

我把它们整理成更适合大家下载安装的【压缩包】，无需梯子，并根据具体的内容，拆解成一二级目录，以方便大家查阅使用。

单单排版就差不多花费1个小时。

希望能让大家在使用Stable Diffusion工具时，可以更好、更快的获得自己想要的答案，以上。

如果感觉有用，帮忙点个支持，谢谢了。

想要原版100款插件整合包的小伙伴，可以来点击下方插件直接免费获取

100款Stable Diffusion插件：

面部&手部修复插件：After Detailer

在我们出图的时候，最头疼的就是出的图哪有满意，就是手部经常崩坏。只要放到 ControlNet 里面再修复。

现在我们只需要在出图的时候启动 Adetailer 就可以很大程度上修复脸部和手部的崩坏问题

AI换脸插件：sd-webui-roop

换脸插件，只需要提供一张照片，就可以将一张脸替换到另一个人物上，这在娱乐和创作中非常受欢迎。

模型预设管理器：Model Preset Manager

这个插件可以轻松的创建、组织和共享模型预设。有了这个功能，就不再需要记住每个模型的最佳 cfg_scale、实现卡通或现实风格的特定触发词，或者为特定图像类型产生令人印象深刻的结果的设置!

现代主题：Lobe Theme

已经被赞爆的现代化 Web UI 主题。相比传统的 Web UI 体验性大大加强。

提示词自动补齐插件：Tag Complete

使用这个插件可以直接输入中文，调取对应的英文提示词。并且能够根据未写完的英文提示词提供补全选项，在键盘上按↓箭头选择，按 enter 键选中

提示词翻译插件：sd-webui-bilingual-localization

这个插件提供双语翻译功能，使得界面可以支持两种语言，对于双语用户来说是一个很有用的功能。

提示词库：sd-webui-oldsix-prompt

提供提示词功能，可能帮助用户更好地指导图像生成的方向。

上千个提示词，无需英文基础快速输入提示词，该词库还在不断更新。

以后再也不担心英文写出不卡住思路了！

由于篇幅原因，有需要完整版Stable Diffusion插件库的小伙伴，点击下方插件即可免费领取