文章使用的AI绘画SD整合包、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了,无需自行查找,。有需要的小伙伴文末扫码自行获取。
今天我们继续讲解 ControlNet 中的 Scribble(涂鸦) 模型,顾名思义,就是将图片转成涂鸦手稿,类似手画的草稿一样。
一 Scribbles 涂鸦处理器
目前 ControlNet 提供了三种 预处理器 来提取图片特征,分别是:
-
Scribble HED: Holistically-Nested Edge Detection[1] (HED)是一个边缘检测器,擅长像真人一样生成轮廓。HED 适用于重新着色和重新设计图像。
-
Scribble Pidinet:Pixel Difference network[2] (Pidinet) 用于检测曲线和直边。它的结果与HED 类似,但通常会产生更清晰的线条和更少的细节。
-
Scribble xdog:EXtended Difference of Gaussian[3] (XDoG) 可用于边缘检测。可以通过调整 xDoG 阈值控制特征的细节
直接上图查看对比效果
原图
特征提取
步骤:
-
上传原图
-
启用,并打开
Allow Preview
预览 -
选择预处理器,模型可以先不用选。提取特征图只需要选 预处理器即可
-
点击预处理和模型中间的 💥 图标进行特征提取
最后我们可以得到3种特征图的效果图
可见,默认情况下可以直接使用 HED 预处理器能得到一个比较粗糙的但包含细节的线条;使用 Pidinet 能够得到大致的轮廓且不包含细节。最后 xdong 则可以进行调整参数控制细节。
二 特征图提取后出图
ControlNet 提取后出图
直接基于上面的三个特征图看看出图效果比较
为了保证出图的效果尽可能的减少非 特征图的影响。我们把参数和种子都设置成一样的。最后可以得到下图效果
参数设置
模型:cetusMix_v4
正向提示词:(masterpiece:1,2), best quality, best detail, lora:add_detail:1,
an oil painting of a feminine person in a field, standing near tall grass, 1girl, hat, solo, long hair
反向提示词:((nsfw)),blush,extra fingers,fewer fingers,(low quality, worst quality:1.4), (bad anatomy), (inaccurate limb:1.2),bad composition, inaccurate eyes, extra digit,fewer digits,(extra arms:1.2),umbrella,
采样器:DPM++ 2M Karras
不同的预处理器出图效果
三 直接上传涂鸦特征图出图
如果我们已经有了一张涂鸦特征图,希望根据提供的提示词渲染上色,那就可以直接使用 Scribble
模型,不需要使用预处理器;
找一个涂鸦特征图:
设置合适的提示词和参数:
正向提示词:(masterpiece:1,2), best quality, best detail, lora:add_detail:1,
1girl,night city,rain,coat,hands in pockets
ControlNet 中可以看到只需要设置模型,不需要在设置预处理器了,我们提供的图就是特征图了!
出图效果:
可见不管是将图片转换成涂鸦草稿,还是直接上传草稿进行渲染出图都是非常方便的!
三种不同的预处理器也很好理解。没有太多的需求,就选 HED。如果只需要轮廓就选 Pidinet,xdog 则比较适合细节控的需求!
写在最后
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。