AI绘画(Stable Diffusion)喂饭级教程-第2篇(SD大模型详解)

我知道宝子们脑子里有很多想法(画面,不可描述…)

但是每个大模型是有自己擅长的绘画能力噢!今天禾斗哥就对SD的大模型进行一个详解!

img

准备原材料,今天要教你做鸡

为了让宝子们学习的有方向,我先把本篇要讲的内容列上,方便后续宝子们反复观看的时候能够快速找到自己遗忘的内容。

  1. SD大模型的概念及基础知识
  2. SD大模型的下载
  3. SD大模型的安装方法
  4. SD大模型的使用方法
  5. 新手推荐的SD大模型

img

开始上课啦!

SD大模型的概念及基础知识

先做一个比喻

如果SD是一个画师,那么大模型就是画师的大脑!

img

虽然这图有点诡异,但是多少还是表达意思了,哈哈

就是可惜,这个大脑有点轴,它只能想象出自己喜欢的画面。

比如你用了一个二次元的大脑,它想出来的画面就是这样的:

img

如果用一个2.5次元的大脑,它想出来的画面是这样的:
在这里插入图片描述

如果用一个三次元的大脑,它想出来的画面是这样的:

img

怎么样,差别还是挺大的对吧?

那为什么会出现这种情况呢?搞这么多大模型不累吗?

那要从成本角度出发,给宝子们解释了。

这些大模型,实际上都是基于官方训练好的基础大模型进行额外训练而成的。毕竟如果从0开始训练一个大模型,这都不是我们这种平民玩家能够参与的。

img

哪怕是在官方的基础大模型的基础上进行训练,也是需要成本的。

简单点说,买个4090显卡,再跑个十天半个月的(还得准备好各种处理好的图片素材噢!)

噢?有宝子说,也没多大事?禾斗哥只能说,土豪,请给我的专栏友情资助呗~

一个4090显卡,可是需要1~2万米!

所以为了降本增效,在官方通用的基础大模型上,通过定向的训练统一风格的图片,让这个大脑越来越精通于这个方面的绘画。

于是乎,成千上万的大模型就出来咯~

img

先扫一眼,哇~

宝子们,成千,上万的大模型,在等着你们!

因为每个大模型都是用一套图片定向训练出来的,所以就会出现一个现象:

对于同一个大模型,其风格是保持一致的,比如使用二次元的大模型,无论怎么生成,它画出来的图片都是二次元的。下面是用同一套提示词生成的图片

第1次生成

img

第2次生成

img

第3次生成

img

对吧?基本上效果是一致的。

当然,这个不绝对哈,毕竟世界上没有两张完全一样的树叶,当然也没有效果完全相同的两张AI生成的图片~

也有人用很多不同风格的图片训练同一个基础模型,不过都是基本在一个次元里的。那样训练成本就会急剧增加,不然就会得到一个什么都会画,但是什么都画不好的…

img

这么牛掰的SD大模型,其组成结构主要分成三个部分

首先,它得能看得懂你的提示词(提示词就是告诉SD画面是啥样的,比如有花、有草、蓝天白云…)

所以它有一个 Text Ecoder 模块,专门进行文字处理。把我们输入的提示词,转换为大模型能理解的各种参数。

img

其次,核心的,它得画点啥吧。

所以它有一个 Unet 模块,专门进行画图。不过要注意,这时候的图我们人是看不懂的。

先提个名词“潜空间”,大模型生成的图是潜空间的图,你可以暂时理解为一堆你看不懂的01010101…

我们能看懂的图,是像素空间,就像上面的美女老师一样。这个以后有机会再说,现在宝子只需要知道大模型本身画出来的图,我们是看不懂的,只有机器能看懂,就阔以啦~

img

有没有想象力丰富的宝子看出来画面里有个人头?

最后,机器能看懂,关我人什么事?

所以,大模型还配备有一个翻译官,叫做 VAE

我们的V大官人,职责就是把潜空间里高度抽象的画面,转变为我们能看懂的像素空间的画面。

(PS:这样一解说,总感觉把人说low了…)

img

总结就是,一个大模型,能够听懂人话、能够画点东西、能够展示图片。

好了,SD大模型的内在美禾斗哥介绍完了,接下来说说SD外在的样子。

img

出来吧,SD大模型们

img

请忽略上图的 jpg 和 png,我懒得专门截个图啦,嘿嘿

没错,那些 .safetensors 结尾的文件,都是大模型。

除此之外,在SD的早期,大模型都是 .ckpt 结尾的文件,也就是 checkpoint 文件(检查点文件)。它和 safetensors 文件是可以互换的,都是大模型。

这两种文件有什么区别呢?

img

ckpt:使用 pickle 序列化,可能包含恶意程序,破坏计算机安全

safetensors:使用 numpy 保存,只包含张量数据,没有任何代码,更安全且高效

所以新的模型,基本上都是 .safetensors 文件了。

再次看到这两个文件,宝子应该不会纠结要用哪个了吧?_!

img

最后说一下,大模型之所以叫“大”,就是因为它相比于别的模型,它的体积大呀!

每个大模型,文件大小都在 2 ~ 8 GB。

禾斗哥下载使用了这么多大模型,基本上都是6~7GB。所以,大模型虽好,宝子也不要贪杯噢!

大模型不在多,在于适合你的绘画场景,不要误入歧途,成为模型收集者!

img

SD大模型的下载

琳琅满目的大模型,主要在C站和L站下载。

C站(需要科学上网):https://civitai.com/

L站(国内的免费):https://www.liblib.art/

C站是国外的,不会科学上网的宝子就不用折磨自己啦~毕竟打开网页都难,何况是下载大模型

img

而L站是我们国内的,禾斗哥强烈推荐大家多逛逛噢!

免费哒,网速还好,而且很多C站上有名的大模型,在L站上也有大神分享,很香噢!

可以看到,L站的界面和C站也是很像的。

img

接下来,禾斗哥就通过L站,给宝子们演示如何下载大模型

首先,点击禾斗哥分享的L站链接,进入L站官网。

第二步 选择模型类型

在页面的右边,细心一点就能看到哈!

类型选择 CHECKPOINT,就是大模型,检查点文件(刚才有说过大模型就是检查点文件)

img

其他类型,后面用到的时候再讲,别急,宝子

第三步 选择分类

比如想要找能画二次元的大模型,就点选二次元

img

除了二次元风格,还有很多风格,禾斗哥就不一一展示了,师傅领进门,玩耍看个人~

第四步 点击喜欢的大模型下载

img

到此,等待大模型下载完成就阔以啦!

是不是挺简单?

但是简单之中,也有一些技巧噢!

每个模型都有一些使用说明,可以在页面上多看看,了解作者提供的使用信息,能够更好的进行图片绘制。

img

除了在网页下载,秋叶大神开发的WebUI启动器也支持模型下载。就是没有图片预览,由于使用国内镜像,下载速度会比较快。不过还是建议使用L站下载,直观,也是国内源。

img

OKK,我们了解了大模型的基本知识,也下载好了心仪的大模型,接下来我们就要看看

感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

SD大模型的安装

宝子们,不要被标题吓到,其实所谓的安装就是把我们现在的大模型文件放到指定的文件夹里就可以啦!

img

第一步:打开SD根目录

img

第二步:进入大模型文件夹

路径:SD根目录/models/Stable-diffusion/

img

img

在Stable-diffusion文件夹下的所有大模型文件都会被识别出来,即使你用了很多层的文件夹,也没有关系。

宝子们可以学禾斗哥,根据自己的分类方式建好文件夹,把大模型文件放进去就好啦。

第三步:粘贴下载的大模型

img

有细心的宝子会注意到,禾斗哥的文件夹里,怎么有图片,而且图片的名字和大模型的名字一样?

其实这是为了在WebUI选择大模型时,能够看到大模型生成效果的预览图,方便我们选择。

就像下面这样:

img

有图片的就会展示图片,如果没有,就会显示灰色的背景。

不过宝子们用熟练之后,有没有图无所谓啦,因为我们一般都是在左上角选择模型。你用的很爽的大模型,你会不知道它叫什么名字吗?对吧_!

img

嘿嘿,刚好说到这里,就进入到我们下一个主题。

SD大模型的使用

如果宝子已经打开着WebUI了,那这时候下载的新的大模型,即使放到

SD根目录/models/Stable-diffusion/

文件夹中,也不会在WebUI中展示出来,不能够选择使用。

难道每次下载安装完大模型都需要重启WebUI?!

img

NoNoNo!

只需要按一下大模型选择框旁边的刷新按钮就可以啦!

img

刷新完再点击下拉框,就能看到自己新下载的大模型,然后选择它。

等待加载完成,就可以继续愉快的画图咯~

img

禾斗哥要强调一下,更换大模型是需要时间的,系统需要把大模型的内容加载到显存或者内存中,所以不要急,我们要温柔的慢慢来~

img

主人,你慢点,我喘不过气了

好了,大模型的内容,禾斗哥就介绍完了。

有宝子就急了,那么多大模型,我啥都不懂。不知道选哪个怎么办?

禾斗哥只能感叹,果然后宫佳丽三千人,就会选美疲劳呀!

好,禾斗哥也给众位萌新宝宝们推荐几个大模型

img

二次元漫画风,禾斗哥推荐:AWPainting_1.3

LiblibAI·哩布哩布AI - 中国领先的AI创作平台www.liblib.art/modelinfo/1fd281cf6bcf01b95033c03b471d8fd8

2.5D风格,禾斗哥推荐:revAnimated_v122

LiblibAI·哩布哩布AI - 中国领先的AI创作平台www.liblib.art/modelinfo/1004b01e19714137a593e30007f3c737

三次元真实风,禾斗哥推荐:majicMix_realistic_v7

LiblibAI·哩布哩布AI - 中国领先的AI创作平台www.liblib.art/modelinfo/bced6d7ec1460ac7b923fc5bc95c4540

嘿嘿嘿,宝子们,赶紧用上禾斗哥精心准备的喂饭级教程里教大家的方法,下载自己钟意的大模型,感受AI绘画的魅力吧!

禾斗哥也用这三个模型分别画3张图,用的提示词都是一样的,先给宝子们过过眼瘾:

宠粉,还得是禾斗哥(小迷妹:谁说不是呢~!_!)

AWPainting_1.3 效果:

img

img

img

revAnimated_v122效果:

img

img

img

majicMix_realistic_v7的效果:

img

img

img

好了,关于大模型的喂饭(喂奶)就到这里了喔!

大家把自己的画图经验分享到评论区,一起成长一起进步!最最最重要的,喜欢禾斗哥,要关注、点赞、收藏,宝子们的喜欢和支持,是禾斗哥克服懒癌和重重困难的精神支柱。

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值