新手变大神必备：Stable Diffusion 图生图功能全流程深度指南-CSDN博客

本文链接：https://blog.csdn.net/m0_71746299/article/details/147626060

在文生图模式下虽然可以根据 prompt
出效果很好的图，但也存在一些问题。利用图生图可对图片进行精准的调整，包括不限于换脸，换背景，修改画质，利用tile模型重新生成和放大图片等。

在这里插入图片描述

在文生图模式下虽然可以根据 prompt
出效果很好的图，但也存在一些问题，比如我们想要微调一些细节，就只能通过修改
prompt
来实现，但是这样的效果并不好；文生图的出图结果太随机；没办法根据我们自己的图进行二次加工。我们通过深入学习图生图就可以很好的解决上述问题。本篇使用MJ生成摄影模特底图，再拿到SD的图生图进行二次修改。

MJ生成模特

绘图工具：Midjourney

提示词：

Beautiful Asian woman in dress surrounded by huge lotus leaves with
intricate patterns, standing in front of a huge full moon with soft light,
Albert Watson style, minimalism, elegant light green --ar 3:4 --s 750 --v
5.2 --style raw

中文：

美丽的亚洲女子身着连衣裙，周围环绕着巨大的荷叶，荷叶上有复杂的图案，站在一轮巨大的满月前，月光柔和，阿尔伯特-沃森风格，极简主义，优雅的浅绿色。

图生图简介

图生图和文生图的原理基本一样，文生图直接根据 prompt 描述来生成图片。而图生图则是在这个基础上添加图片的信息，图片+prompt
生成新的图。图生图主要的几个重点：重绘幅度、图生图下的TAG写法、缩放模式等。

在这里插入图片描述

1、图生图的2种打开方式

第一种是在文生图中将生成好的图直接发送到图生图中。第一种是在图生图界面中上传参考图。本文采用的是第二种方法。

在这里插入图片描述

2、提示词写法

图生图正向提示词不用写太多人物描述的TAG，只要写一些画质的基础描述语即可。

模型：[写实]墨幽人造人_v1020 （写实模型都可以）正向Prompt：masterpiece, best quality,1girl,(best quality), ((masterpiece)), (highres),beautiful face, extremely_beautiful_detailed_anime_face,反向 prompt：easynegative, paintings,
sketches, (worst quality:2), (low quality:2), (normal quality:2), lowres,
normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin
blemishes, age spot, glans,extra fingers,fewer fingers,strange fingers,bad
hand,naked,uncovered,(worst quality, low quality:1.4), (bad anatomy),
watermark, signature, text, logo,contact, (extra limbs),(3d), Six
fingers,Low quality fingers,monochrome,(((missing arms))),(((missing
legs))), (((extra arms))),(((extra legs))),less fingers.seed 种子：-1步数：30

3、重绘幅度

Denoising strength(重绘幅度)
就是来控制与原图一致性的程度。如果只是简单修改背景、换脸之类的就0.3-0.5.画质整体改变很大的话就0.7上下（跟底图没什么相似性了）

在这里插入图片描述

4、图像尺寸

在这里插入图片描述

5、缩放模式

Just resize、 Crop and resize、 Resize and fill 这三种模式会根据新尺寸选择是填充、拉伸还是裁剪。

1.拉伸

当我们调整了分辨率后导致和原图不一致，拉伸模式就会直接把图片拉大（不推荐）。

2.裁剪

如果设置的分辨率要小于原分辨率，裁剪就会将多余的剪掉。

3.填充

如果设置的分辨率要高于原图的分辨率，AI会帮助我们进行填充，而填充的内容则会依赖于重绘幅度，重绘幅度越高，AI自主发挥的空间越大。

6、模型选择

选择主模型：根据图片的画质，选择对应的大模型。（写实、二次元，2.5D等），主模型影响出图的风格。要写实就真人模型，要二次元就选择二次元模型。

在这里插入图片描述

7、 X/Y/Z 脚本控制

所以我们打开 X/Y/Z 图表脚本，设置重绘幅度范围（0-1）,让 SD 一次性生成10张图

在这里插入图片描述

生成的图片

在这里插入图片描述

重绘幅度越高，那么生成出来的原图就与原图差别越大。搭配不同的模型+不同程度的重绘幅度生成不同效果的图片。

图生图中修改背景

图生图中输入prompt，提示词部分是告诉AI修正图片的地方。

范例：下面的模特，我们想把背景换到校园里（在正向prompt 中加入 “背景是校园”）

在这里插入图片描述

正向 prompt：

  * 1
  * 2

photography,(8k uhd,RAW photo:1.2),(realistic,photo-realistic:1.37),(best quality:1.2),(masterpiece:1.5),The background is a college campus,(best quality:1.2),(masterpiece:1.5),The background is a college campus