Stable Diffusion好帮手: ControlNet,Lora,Embedding通俗讲解_stable diffusion controlnet lora

哈喽这里是海绵

今天咱们聊聊几个听起来可能有点高大上，但其实超级有趣的Stable Diffusion好帮手：ControlNet、LoRA和Embedding。别被这些洋气的名字吓到啦，跟着我一起来探索吧！

一、ControlNet

想象一下，你正在画一幅超复杂的画，比如说…一群穿着华丽礼服的人在月光下跳舞。哇，光是想想就觉得难度爆表啊！但别慌，ControlNet就像是你的贴心画家小伙伴，随时准备帮你一把。它会先给你画出大致的轮廓和关键细节，就像是给你一个超棒的"填色本"。

人物的姿势、表情、衣服的褶皱，甚至月光的阴影，都会被勾勒出来。这样一来，你就不用担心画歪了舞者的腿，或者把月亮画成了太阳。简直是业余画家的福音啊！ControlNet还能帮你定下整体的艺术风格。想要梵高风格的星空？没问题！想要莫奈风格的柔和光影？也不在话下！有了这个神奇的小助手，你的画作就能既有创意又专业，让人眼前一亮！

下面我们来看个示例: 使用controlnet来迁移梵高画作的风格

生成的结果：

二、LoRA

接下来，让我们聊聊LoRA。这个名字听起来像是某个魔法咒语，对吧？其实，它的全称是Low-Rank Adaptation，中文叫"低秩适应"。嗯…听起来还是很高深的样子。

不过别担心，我来给你打个比方。想象你有一个超级无敌的百宝箱。这个箱子里有各种各样的工具，可以帮你解决生活中遇到的各种问题。修理自行车？没问题！给花园除草？小菜一碟！甚至还能帮你做出一道美味的意大利面！

LoRA就像是这样一个神奇的百宝箱。它可以让一个庞大的AI模型快速适应新的任务，而不用从头开始学习。就好像你的百宝箱突然学会了修理电脑，而不需要你重新买一个专门的电脑工具箱。酷毙了，对不对？

举个示例:

1. 写实大模型及提示词

生成图片:

2. 保存生成图片的seed

点击如图绿色三角，可以提取当前生成图片的seed值。当前图片seed值是1040912924

3. 修改提示词，添加lora

3.1 添加ballpoint lora,点击lora图片，会自动添加到提示词后

生成图片:

3.2 也可以多个lora一起使用

生成图片：

不知大家发现了没，使用相同seed生成的人物脸部比较相似,可以控制角色一致性，制作绘本啊，动漫故事啊都可以。

三、 Embedding

最后，我们来认识一下Embedding。这个词听起来像是某种高级按摩服务，但其实它在AI世界里扮演着超级重要的角色哦。想象你走进了一个超大的图书馆。里面有成千上万本书，涵盖了从古希腊哲学到现代量子物理的各种主题。如果这些书都随意摆放，你肯定会抓狂的吧？

但是别担心，图书馆里有一位超级厉害的管理员。她把所有的书都按照主题、作者、出版年份等信息进行了分类和编号。这位神通广大的图书管理员，就是我们的Embedding啦！在AI的世界里，Embedding把复杂的信息（比如文字、图像、声音）转换成一串数字。

这样，计算机就能更容易地理解和处理这些信息。例如，Embedding可以把"我爱吃冰淇淋"这句话转换成一串数字：[0.2, -0.5, 0.8, 0.1]。这串数字看起来毫无意义，但对计算机来说，这就是一本打开的书，里面包含了关于这句话的各种信息。

有了Embedding，AI就能更好地理解人类的语言、识别图像，甚至创作音乐和诗歌。它就像是AI和人类世界之间的翻译官，帮助两个完全不同的世界进行沟通。是不是很神奇？

好啦，今天的SD小课堂就到这里啦。我们认识了三位SD的好伙伴：画家小助手ControlNet、百变工具箱LoRA，还有翻译官Embedding。

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

对于0基础小白入门：

如果你是零基础小白，想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短，学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括：stable diffusion安装包、stable diffusion0基础入门全套PDF，视频学习教程。带你从零基础系统性的学好AI绘画！

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

1.stable diffusion安装包 （全套教程文末领取哈）

随着技术的迭代，目前 Stable Diffusion 已经能够生成非常艺术化的图片了，完全有赶超人类的架势，已经有不少工作被这类服务替代，比如制作一个 logo 图片，画一张虚拟老婆照片，画质堪比相机。

最新 Stable Diffusion 除了有win多个版本，就算说底端的显卡也能玩了哦！此外还带来了Mac版本，仅支持macOS 12.3或更高版本。

2.stable diffusion视频合集

我们在学习的时候，往往书籍代码难以理解，阅读困难，这时候视频教程教程是就很适合了，生动形象加上案例实战，一步步带你入门stable diffusion，科学有趣才能更方便的学习下去。

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果，这时则需要通过使用大量训练数据，调整模型的超参数（如学习率、训练轮数、模型大小等），可以使得模型更好地适应数据集，并生成更加真实、准确、高质量的图像。

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言，整个SD学习过程中都离不开这本提示词手册。

5.AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

这份完整版的学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】