用 AI 绘画出图10分钟，比设计总监下班都早，太太太方便了！

最新推荐文章于 2025-02-16 08:22:11 发布

stablediffusion知识库

最新推荐文章于 2025-02-16 08:22:11 发布

阅读量1.1k

点赞数 24

文章标签：人工智能 linux midjourney AIGC stable diffusion

本文链接：https://blog.csdn.net/yihanss/article/details/144129872

版权

Midjourney 和 Satble Diffusion 是目前大家最常用的两个 AI 绘图工具。今天这篇文章一起来看下58的设计师如何从三个维度去完成Stable Diffusion在视觉设计方向的技巧应用。‍‍‍‍

▍线稿/插画秒变3D‍‍‍

线稿秒变3D场景

在人工智能绘画软件之前，我们如果想将一张线稿设计图转变为一幅3d场景可能需要非常复杂的过程，比如：线稿填色成平面插画，然后根据画面物体的结构在3d软件中进行建模，最终根据配色进行打光渲染等步骤来完成。而现在我们运用stable
diffusion甚至数秒的时间就可以完成一系列方案。

关于stable
diffusion的使用原理网络上有许多详细的教程，在这里就不向大家赘述。接下来我将向大家分享如何运用SD将midjourney生成的线稿图转变为3d场景。

整个的创作过程在文生图模式下进行创作的，大模型选择的是disneypixarcartoon_v10.safetensors，外挂VAE滤镜为

chilloutmix_Niprunedfp32fix.vae.ckpt；最关键的部分controlnet，前后都选择为canny-
边缘检测或者也可以尝试lineart-
标准线稿提取（将线稿图上传其中），根据画面添加正反向具体的描述关键词，不断的去调整合适的参数，就可以得到我们想要的效果。

如果最终效果图部分视觉没有达到我们的预期，我们可以结合图生图模式下的局部重绘或者上传重绘蒙版功能，运用重绘蒙板结合关键词进行重新绘制，直达到我们的预期效果为止。当熟悉了整个创作模式后进行批量输出方案时，线稿输出3d画面的效率大大超出我们的想象。

平面卡通IP秒变3D角色

除了上述的线稿转3d场景之外，我们日常的平面IP卡通人物也可以通过stable
diffuson秒变3d人物，在实现过程上述的案例有所不同，因为我们需要更加精准的按照我们的平面插画进行3d人物的制作，当然我们更期望最终的3d形象与我们的平面效果完全吻合，因此这里我们不再使用文生图模式，而是采用图生图模式来进行更精准的控制。

以一张用midjourney生成的ip卡通平面三视图为例：根据我们卡通人物的特征，添加详细的正反向描述关键词来构建预期效果，重绘幅度数值设置为0.5。

另外，在模型的使用上还是有很大区别的，大模型选用了revanimated_v122.safetensors，滤镜是animevae.pt。controlnet采用depth-
zoe控制深度；canny或者lineart-
anime控制外形线稿的提取；关于lora模型选择了blindbox给予类似于盲盒有趣的3d效果，另外还使用了charturnerv2:0.4这个lora模型用来增强模型的塑料质感，最终就形成了如图的3D角色。

▍人物场景的精准控制 ‍‍‍‍‍‍‍‍

在互联网许多应用领域筛选出符合预期的人物场景图是一个难题，但是自从有了stable diffusion之后，这个难题几乎迎刃而解。通过stable
diffusion的图生图模式，配合controlnet的精准控制就非常容易达到我们想要的预期效果。当然在这个过程中，为了避免版权纠纷问题，在使用图生图的底图时尽量选取我们拥有版权的图片，这样在这个基础上做衍生就规避了版权的风险。

‍

比如，现在我想要一张（如下图）同样姿势的工作人员不是站在空调旁边，而是想让他站在微波炉旁边的场景，那么我们可以将原图放在图生图模式下，大模型同样选用relisticv20，滤镜选择animevae.pt。lora模型选择filmvelvia2类似于胶片质感来烘托真实的场景氛围；controlnet运用的是openpose_full用其来控制人物的姿势状态，配合重绘幅度参数的调节以及正反关键词的描述来达到想要的效果。本案例的正反关键词描述如下：

正向关键词：A handsome smiling Chinese repairman is standing under the microwave
oven, wearing a green T-shirt. There are some white furniture in the scene,
dramatic lighting,

一位面带微笑的中国修理工站在微波炉下，身穿绿色T恤。场景中置放了一些白色的家具，引人注目的灯光。

反向关键词：EasyNegative ,GS-DeMasculate-neg,bhands-neg, lowres Unreasonable view
(worst quality:2), (low quality:2),

前3个英文单词是调用的embeddings文件名称，低分辨率的，不合理的视图（最差质量：2），（低质量：2）

另外在真实人物场景的输出过程中，很多时候人物的手部、脸部会出现问题，我们可以通过SD的进阶模型embeddings在一定程度上去修复画面手部的问题，例如调节手部的模型bhands-
neg.pt；对于人物脸部扭曲的问题，我们可以运用face editor插件，通过调整参数来使人物的表情更加真实自然。

▍SD设计创意字体

Stable
diffusion除了可以创作上述的3d、真实场景图之外，当然也可以完成创意风格字体的设计。对于创意风格字体我们可以通过文生图的形式，给予sd更多的创作空间可以产出多样风格的字体样式，接下来继续和大家分享如何将白底黑字转变为我们想要的创意风格的创作过程。

以上图冰块文字为案例

整个过程是在文生图模式下进行的，在大模型上需要选择是：realisticVision，滤镜选择的是：VAE模型 vae-ft-mse-840000-ema-
pruned.safetensors，如果没有的话可以前往c站去下载。采样方法在这个案例中选择了DPM++ 2M
Karras，Controlnet预处理器运用的是lineart（标准线稿提取），模型运用的是lineart。然后在里面导入我们的白底黑字图片，在正反向描述语里描述我们想要的效果，经过多次尝试就会遇到意想不到的惊喜。最后为了更好地提高视觉效果细节，我们可以将最终图片导入到图生图模式下（描述同文生图），Controlnet预处理器选择tile_resample，模型选择control_v11f1e_sd15_tile，经过二次处理后会发现视觉效果更加惊艳细致。当然在这里主要是向大家介绍制作创意风格字体的一个思路，具体的参数和模型大家可以根据具体情况去调节。

以下为本案例使用的关键词：

正向关键词：high quality, masterpiece, ((Transparent ice cubes)), glacier
background,

高品质，杰作，（（透明的冰块）），冰川背景。

反向关键词：EasyNegative, BadArtist, BadPrompt, BadImages, poor anatomical
structure, low quality, text errors, extra numbers, fewer numbers, jpeg
artifacts, signatures, watermarks, username, blurring, cropped,

前4个英文单词是调用的embeddings文件名称，解剖结构差，低质量，文本错误，多余的数字，缺少的数字，jpeg伪影，签名，水印，用户名，模糊，被裁剪的。
所有的AI绘画工具，模型和插件资源·，AI学习资料及教程都已经整理好了，文末扫码即可免费获取

针对各位AIGC初学者，这里列举了一条完整的学习计划，感兴趣的可以阅读看看，希望对你的学习之路有所帮助，废话不多说，进入正题：目标应该是这样的：

第一阶段（30天）：AI-GPT从入门到深度应用

该阶段首先通过介绍AI-GPT从入门到深度应用目录结构让大家对GPT有一个简单的认识，同时知道为什么要学习GPT使用方法。然后我们会正式学习GPT深度玩法应用场景。

-----------

GPT的定义与概述
GPT与其他AI对比区别
GPT超强记忆力体验
万能GPT如何帮你解决一切问题？
GPT表达方式优化
GPT多类复杂应用场景解读
3步刨根问底获取终极方案
4步提高技巧-GPT高情商沟通
GPT深度玩法应用场景
GPT高级角色扮演-教学老师
GPT高级角色扮演-育儿专家
GPT高级角色扮演-职业顾问
GPT高级角色扮演-专业私人健身教练
GPT高级角色扮演-心理健康顾问
GPT高级角色扮演-程序UX/UI界面开发顾问
GPT高级角色扮演-产品经理
GPT高级技巧-游戏IP角色扮演
GPT高级技巧-文本冒险游戏引导
GPT实操练习-销售行业
GPT实操练习-菜谱推荐
GPT实操练习-美容护肤
GPT实操练习-知识问答
GPT实操练习-语言学习
GPT实操练习-科学减脂
GPT实操练习-情感咨询
GPT实操练习-私人医生
GPT实操练习-语言翻译
GPT实操练习-作业辅导
GPT实操练习-聊天陪伴
GPT实操练习-育儿建议
GPT实操练习-资产配置
GPT实操练习-教学课程编排
GPT实操练习-活动策划
GPT实操练习-法律顾问
GPT实操练习-旅游指南
GPT实操练习-编辑剧本
GPT实操练习-面试招聘
GPT实操练习-宠物护理和训练
GPT实操练习-吸睛爆款标题生成
GPT实操练习-自媒体爆款软件拆解
GPT实操练习-自媒体文章创作
GPT实操练习-高效写作推广方案
GPT实操练习-星座分析
GPT实操练习-原创音乐创作
GPT实操练习-起名/解梦/写诗/写情书/写小说
GPT提升工作效率-Word关键字词提取
GPT提升工作效率-Word翻译实现
GPT提升工作效率-Word自动填写、排版
GPT提升工作效率-Word自动纠错、建议
GPT提升工作效率-Word批量生产优质文章
GPT提升工作效率-Excel自动化实现数据计算、分析
GPT提升工作效率-Excel快速生成、拆分及合并实战
GPT提升工作效率-Excel生成复杂任务实战
GPT提升工作效率-Excel用Chat Excel让效率起飞
GPT提升工作效率–PPT文档内容读取实现
GPT提升工作效率–PPT快速批量调整PPT文档
GPT提升工作效率-文件批量创建、复制、移动等高效操作
GPT提升工作效率-文件遍历、搜索等高效操作
GPT提升工作效率-邮件自动发送
GPT提升工作效率-邮件自动回复
GPT接入QQ与QQ群实战
GPT接入微信与微信群实战
GPT接入QQ与VX多用户访问实战
GPT接入工具与脚本部署实战

第二阶段（30天）：AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习，首先通过了解AI绘画定义与概述，AI绘画的应用领域，PAI绘画与传统绘画的区别，AI绘画的工具分类介绍的基本概念，以及AI绘画工具Midjourney、Stable Diffusion的使用方法，还有AI绘画插件和模板的使用为我们接下来的实战设计学习做铺垫。