stable diffusion十七种controlnet详细使用方法总结

前言

最近不知道发点什么，做个controlnet 使用方法总结好了，如果你们对所有controlnet用法，可能了解但是有点模糊，希望能对你们有用。

一、SD controlnet

我统一下其他参数，仅切换controlnet模型，为你演示效果

正向提示词：（只是一些人物基础提示词为了方便省事，实际场景请根据图片反推提示词）

best quality,masterpiece,4k,1girl,solo,long hair,dress,jewelry,choker,brown hair,realistic,necklace,brown eyes,black dress,lips,<lora:tianfeng_cutegirls4:0.8>,

负向提示词：

ng_deepnegative_v1_75t,(badhandv4:1.2),(worst quality:2),(low quality:2),(normal quality:2),lowres,bad anatomy,bad hands,((monochrome)),((grayscale)) watermark,moles,large breast,big breast,sunshine,bright,

中间参数

1.Canny

可以根据你提供的图片经过预处理器成为线稿，然后经过canny controlnet模型控制图像扩散，可以调节权重和引导时机控制线稿的比重，适用场景偏需要提取人物，汽车，动物等线稿进行重绘

2.depth

深度controlnet主要用于凸显图像的前景背景和空间关系，前景的比重大，背景浅（提示词加上空间等），在使用场景适用于对空间纵深有需求

深度有好几种预处理器，你可以都尝试下，它们区别总结为对前景背景比重不同，有点凸显主体人物，背景则比重较小，有的则是主体背景适当均衡

3.Normalmap

法线贴图一般应用于3d雕塑，带来3d深度雕塑的信息，使用场景一般为3d雕塑，我的举例图片可能不太恰当，你大概知道干什么的就行

4.openpose

根据提供的图片提取姿态信息，控制想要生成风格的姿态图片，推荐dw_openpose

5.MLSD

一直只能识别直线，用于室内设计提取线稿，然后重绘，一键装修

提示词：

qingshe,living room,HDR,UHD,8K,best quality,realistic,masterpiece,Highly detailed,light,lamp,Fuji_Mountain out of window,

6.Lineart

Lineart预处理器有分别针对写实，动漫，可以根据自己需求选择预处理器，效果来说比canny好

7.softedge

软边缘检测与canny和lineart不同，采用一种更加柔和符合真实场景线条信息，与原图也更加吻合

8.scribble

你还在为画画太丑而烦恼吗，上传简简单单的涂鸦手绘，即可生成一张炫酷图片，例如上传一张丑到爆炸的跑车涂鸦

9.segmentation

将图片存在的物体进行分割出来，这样可以保证重绘物体还原性高，同时还可以在预处理出来的图片上进行添加色块，segmentation有一个物体与色块对应表，例如画一个桌子，涂上对应的颜色，经过controlnet绘制，可以更加精准生成一张桌子

10.shuffle

风格融合，可以上传一张如水墨，油画，科技画风图片，经过预处理器通过controlnet会与原模型风格进行融合，生成一张融合风格的图片

11.Tile

tile用法非常多，就使用而言，目前是我使用感觉最强的一个controlnet模型，特别是在还原图片风格上，因为是分块重采样，基本完美复刻，同时高清修复效果细节也远超普通放大算法

12.inpaint（局部重绘）

类似图生图局部重绘，用画笔在原图涂上需要重绘的部分，然后加上对应提示词，例如换装

13.instructP2P

pix2pix主要用于风格迁移，例如天气转换

14.reference only

可以根据你上传的图片，添加提示词重新生成一张相同风格的图片，如女孩侧身，提示词新加上，身体正对观众

15.Recolor

主要用于一些老旧照片的上色，或者黑白图，都可以

16.Revision

用于一些复杂元素过多的图片不能很好的进行风格转移，之前可能采用提示词反推，还是不能完美蕴含原图细节，可以使用Revision配合原图进行风格转移

17.IP_adapter

用在风格迁移上非常完美，建议优先使用，不仅仅是风格，还有原图形象，基本包含全部内容，

差不多到这了！！！说一下我个人经常用的，

基本就是Lineart，softedge，tile，ip_adapter,dw_openpose

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

👉[[CSDN大礼包：《StableDiffusion安装包&AI绘画入门学习资料》免费分享]]（安全链接，放心点击）

对于0基础小白入门：

如果你是零基础小白，想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短，学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括：stable diffusion安装包、stable diffusion0基础入门全套PDF，视频学习教程。带你从零基础系统性的学好AI绘画！

1.stable diffusion安装包 （全套教程文末领取哈）

随着技术的迭代，目前 Stable Diffusion 已经能够生成非常艺术化的图片了，完全有赶超人类的架势，已经有不少工作被这类服务替代，比如制作一个 logo 图片，画一张虚拟老婆照片，画质堪比相机。

最新 Stable Diffusion 除了有win多个版本，就算说底端的显卡也能玩了哦！此外还带来了Mac版本，仅支持macOS 12.3或更高版本。

2.stable diffusion视频合集

我们在学习的时候，往往书籍源码难以理解，阅读困难，这时候视频教程教程是就很适合了，生动形象加上案例实战，一步步带你入坑stable diffusion，科学有趣才能更方便的学习下去。

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果，这时则需要通过使用大量训练数据，调整模型的超参数（如学习率、训练轮数、模型大小等），可以使得模型更好地适应数据集，并生成更加真实、准确、高质量的图像。

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言，整个SD学习过程中都离不开这本提示词手册。

5.SD从0到落地实战演练

如果你能在15天内完成所有的任务，那你堪称天才。然而，如果你能完成 60-70% 的内容，你就已经开始具备成为一名SD大神的正确特征了。

这份完整版的学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】