【StableDiffusion教程】 ControlNet 涂鸦转换就是这么简单

文章使用的[AI绘画]SD整合包、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了,无需自行查找。有需要的小伙伴文末扫码自行获取。

今天我们继续讲解 ControlNet 中的 Scribble(涂鸦) 模型,顾名思义,就是将图片转成涂鸦手稿,类似手画的草稿一样。

一 Scribbles 涂鸦处理器

目前 ControlNet 提供了三种 预处理器 来提取图片特征,分别是:

  • Scribble HED: Holistically-Nested Edge Detection[1] (HED)是一个边缘检测器,擅长像真人一样生成轮廓。HED 适用于重新着色和重新设计图像。

  • Scribble Pidinet:Pixel Difference network[2] (Pidinet) 用于检测曲线和直边。它的结果与HED 类似,但通常会产生更清晰的线条和更少的细节。

  • Scribble xdog:EXtended Difference of Gaussian[3] (XDoG) 可用于边缘检测。可以通过调整 xDoG 阈值控制特征的细节

直接上图查看对比效果

原图

特征提取

步骤:

  • 上传原图

  • 启用,并打开 Allow Preview 预览

  • 选择预处理器,模型可以先不用选。提取特征图只需要选 预处理器即可

  • 点击预处理和模型中间的 💥 图标进行特征提取

最后我们可以得到3种特征图的效果图

可见,默认情况下可以直接使用 HED 预处理器能得到一个比较粗糙的但包含细节的线条;使用 Pidinet 能够得到大致的轮廓且不包含细节。最后 xdong
则可以进行调整参数控制细节。

二 特征图提取后出图

ControlNet 提取后出图

直接基于上面的三个特征图看看出图效果比较

为了保证出图的效果尽可能的减少非 特征图的影响。我们把参数和种子都设置成一样的。最后可以得到下图效果

参数设置

模型:cetusMix_v4

正向提示词:(masterpiece:1,2), best quality, best detail, lora:add_detail:1,
an oil painting of a feminine person in a field, standing near tall grass,
1girl, hat, solo, long hair

反向提示词:((nsfw)),blush,extra fingers,fewer fingers,(low quality, worst
quality:1.4), (bad anatomy), (inaccurate limb:1.2),bad composition, inaccurate
eyes, extra digit,fewer digits,(extra arms:1.2),umbrella,

采样器:DPM++ 2M Karras

不同的预处理器出图效果

三 直接上传涂鸦特征图出图

如果我们已经有了一张涂鸦特征图,希望根据提供的提示词渲染上色,那就可以直接使用 Scribble 模型,不需要使用预处理器;

找一个涂鸦特征图:

设置合适的提示词和参数:

正向提示词:(masterpiece:1,2), best quality, best detail, lora:add_detail:1,
1girl,night city,rain,coat,hands in pockets

ControlNet 中可以看到只需要设置模型,不需要在设置预处理器了,我们提供的图就是特征图了!

出图效果:

可见不管是将图片转换成涂鸦草稿,还是直接上传草稿进行渲染出图都是非常方便的!

三种不同的预处理器也很好理解。没有太多的需求,就选 HED。如果只需要轮廓就选 Pidinet,xdog 则比较适合细节控的需求!

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉12000+AI关键词大合集👈

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值