Stable Diffusion｜同个角色生成多角度

黑客彤姐

已于 2024-12-30 11:00:01 修改

阅读量1.7k

点赞数 34

CC 4.0 BY-SA版权

文章标签： stable diffusion 人工智能计算机视觉 AI作画美女

于 2024-07-02 13:34:56 首次发布

本文链接：https://blog.csdn.net/A2421417624/article/details/140122627

在利用Stable Diffusion生成角色图片时，一个常见的问题是如何保持角色的一致性。目前，大多数人的解决方案是训练一个LoRA模型。在训练一个固定的形象角色中，最重要的是面部特征，其次是体型、服装、配饰等。

对于现实人物，我们可以通过照片进行训练。但是，如果要训练一个动漫角色或由AI生成的角色呢？训练一个动漫角色的一个现有解决方案是上网搜索该角色的图片或截图。然而，这些图片往往需要后续处理，因为它们大多不清晰，会耗费大量时间。

目前，AI生成的角色很难保持一致性，随机性较高。因此，在收集训练集时，需要花费大量时间。为了解决这个问题，可以尝试以下方法：

前期设置

1、在开始生图之前，需要准备两张图片：一张是一个包含15个不同角度的人脸图片，用于生成不同角度的人脸的OpenPose骨骼图，另一张是一个包含15个格子的网格图片，用于引导SD将15张图像保留在特定的框内。

（15个角度的人脸图片）

（15个格子的网格图片）

2、在准备好上述两张图片后，接下来需要设置ControlNet。将第一张图片（包含15个不同角度的人脸图片）上传到“ControlNet”的“Unit0”中，并勾选“完美像素模式”，选择“OpenPose”模型。

3、点击“ControlNet Unit1”，上传第二张图片（包含15个格子的网格图片），并勾选“完美像素模式”，选择“Lineart”模型。

4、可以使用“ADetailer”防止脸部崩坏（可开可不开，开了生成图片的速度会变慢，如果选择不开，可以等待图片生成完成之后，利用放大来修复脸部。）

生成图片

设置好上述所有的设置之后，就可以开始写提示词，设置生成图片的参数啦！

1、选择一个模型，输入正向提示词以及反向提示词。

（以下是我输入的提示词，可以根据自己的需求输入任意提示词）

正向提示词：(best quality,4k,8k,highres,masterpiece:1.2),(ultra-detailed),1girl,grey background

反向提示词：EasyNegative,(nsfw:1.5),verybadimagenegative_v1.3, ng_deepnegative_v1_75t, (ugly face:0.8),cross-eyed,sketches, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, bad anatomy, DeepNegative, facing away, tilted head, Multiple people, lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worstquality, low quality, normal quality, jpegartifacts, signature, watermark, username, , bad feet, cropped, poorly drawn hands, poorly drawn face, mutation, deformed, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, extra fingers, fewer digits, extra limbs, extra arms,extra legs, malformed limbs, fused fingers, too many fingers, long neck, cross-eyed,mutated hands, polar lowres, bad body, bad proportions, gross proportions, text, error, missing fingers, missing arms, missing legs, extra digit, extra arms, extra leg, extra foot, ((repeating hair))