如何用Stable diffusion三步搞定场景定制化？这些经验你一定要知道！AI绘图SD商业化实战教程！

认真写程序的强哥

于 2024-09-27 10:33:01 发布

阅读量351

点赞数 14

文章标签：人工智能 stable diffusion AI工具 SD教程 AI场景定制化 AI绘画商业实战 AI教程

本文链接：https://blog.csdn.net/qq_41314882/article/details/142587463

版权

随着人工智能的逐渐发展，越来越多的 AI 工具也一窝蜂的涌现出来。

在众多的 AI 利器当中 Midjourney（简称 MJ）和 Stable diffusion（简称 SD）两款软件在图片的效果呈现上表现尤为突出，虽然 MJ 能够通过描述关键词来对图像进行调整，但总觉得跟脑海里设想的那张图还差一点意思，不能完全的符合心里预期。

迫于这个原因我们将经历投入到 SD 的学习当中，在学习的过程中发现 SD 的操作界面对设计师来说比较友好，操作界面更类似于一款软件的操作界面，感觉是在学习一门技术（可能是总用绘图软件做图留下的后遗症）。

在实际操作 SD 这款软件时有两点是强于 MJ 的：1.它可以精准控制画面的构图及布局。2.它也可以定制画面的输出风格。在工作上能将所设想的草图通过 control net 插件进行百分之百的还原，可以说大大的提高了出图质量及数量。

本次分享将结合平时工作中，应用到 SD 软件进行出图的实操经验，通过对 SD 的运用输出行业场景图来给大家做一些示范。在日常的工作中，为了保证视觉构图还有画面风格的一致性，有意去搭建了属于赶集行业特征的运营场景素材库，目的是为了让设计师能灵活调用，随做随取，节省时间提高效率。

本期教程开始之前，我们需要安装好StableDiffusion这款软件的，如果你还没有安装使用过，那么可以看看我的往期入门安装教程，新手小白也能快速上手使用！AI绘画 Stable Diffusion【SD入门】：如何体验AI绘画工具Stable Diffusion，附SD安装教程和三种体验方式！

在这里插入图片描述

在开始实操之前，先来说下 SD 的工作流程：

1.前期需要在脑子里构想一个场景图，并借用绘图软件勾勒出大概的草图轮廓线。

2.通过 SEG 图表找到对应材质的色值（SEG 色表大家可以网上搜索自行下载），实现对画面中摆放物体的材质进行精准调节。

3.将文生图得到的图片转到图生图中借助 control net 插件中 tile_resample 模型对图片里的细节进行处理于此同时使用脚本中的 UItemate SD upscale 模型将已得到的图片进行人为放大（这样做是为了在图生图的放大过程中同时修补画面细节）
在这里插入图片描述

一、线稿生成图

好的废话不多说，咱们开始演示：

第一步输入正向关键词：CBD 办公场景,宽敞明亮,有格调,高清摄影,广告级修图,8K 高清,CBD office scene,Bright and spacious,There is style,HD photography,Ad-level retouching,8K HD,

反向关键词：NSFW,nude,naked,porn,(worst quality, low quality:1.4),deformed iris,deformed pupils,(deformed,distorteddisfigured:1.3)cropped,out of frame,poorlydrawn,badanatomy,wronganatomy,extralimb,missinglimb,floatinglimbs,cdonedface(mutatedhandsandfingers:1.4),disconnectedlimbs,extralegs,fusedfingers,toomanyfingers,longneck,mutation,mutated,ugly,disgusting.amputation,blurry,jpegartifacts,watermark,watermarked,text,Signature,sketch,

输入关键词的同时将脑子里的想法通过绘图软件绘制成线稿图（这个线稿的布局及外形决定了出图的结构及布局），将绘制好的草图上传至 control net 插件里选择 scribble 模型（实际操作界面如下）。
在这里插入图片描述

感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。

二、SEG色值生成

第二步：根据画面需要对场景内的物体进行材质更换（这一步需要配合关键词即画面中出现的材质需要在关键词中也对应提及，关键词的重要程度要用（）强调，同样也借助 control net 插件里选择 seg 模型，配合第一步的操作双开 control net 模型，SEG 权重的大小数值，决定最终呈现的效果。

在这里插入图片描述

生成效果如下：

三、放大图片调整细节

第三步：选择一张自己心仪的图片然后转到图生图模式，将图片结合 control net 插件中的 tile_resample 进行细节丰富，同时使用脚本中的 UItemate SD upscale 模型将其放大至自己想要的图片大小。
在这里插入图片描述

好啦，现在你已经得到了一张定制化的场景图片了，是不是还是蛮精准的，按照我们上述的操作路径，我们分别对餐饮场景、销售办公场景、美容美发场景进行了批量生成，效果图片如下。