Stable Diffusion的基础模型介绍
稳定扩散(Stable Diffusion)模型是一种强大的生成式对抗网络(GAN),它在图像生成和内容创作领域取得了巨大的成功。在深入了解各种模型之前,让我们首先来介绍一下Stable Diffusion的基础模型,这也被称为大模型、底模型或主模型。
Checkpoint模型
Checkpoint模型被认为是Stable Diffusion模型的核心组成部分,它是生成图像所必需的基本模型。一旦您安装了Stable Diffusion软件,您就需要配备一个主模型才能开始创作。这个主模型包含了生成图像所需的所有信息,因此您不需要额外的文件或组件。
不同的主模型具有不同的特点,它们在创作风格和擅长的领域上有所侧重。在选择主模型时,您需要考虑您的创作需求和偏好。不同的主模型可以帮助您实现不同风格的图像生成。
这些主模型的文件通常比较大,通常在2GB到7GB之间。它们的文件后缀通常是“ckpt”或“safetensors”。
目前,一些流行和常见的Checkpoint模型包括“Anything”系列(如v3、v4.5、v5.0)、“AbyssOrangeMix3”、“ChilloutMix”、“Deliberate”、以及“国风系列”等等。这些Checkpoint模型都是从Stable Diffusion的基本模型训练而来,它们使用不同的数据进行训练,以生成特定风格或对象的图像。
总的来说,Checkpoint模型是Stable Diffusion模型的基石,是创作精美图像的关键。选择适合您需求的主模型,将为您的创作提供一个强大的起点。
这里需要注意的是:基本没有人会用自带的大模型,因为效果很差。
(但是,大家如果想自己练大模型的话,SD系列是不错的基础模型,因为他们比较庞杂,什么风格都有,属于中性模型。)
大家在下载模型的时候,会看到pruned、emaonly(ema)之类的后缀,pruned是完整版,emaonly是剪枝版。剪枝版比完整版通常小很多,方便下载。如果只是使用的话,两者差别不大,如果是想要自己练模型的话,需要下载完整版。不过有的剪枝版也不带后缀,有的剪枝版后缀也是prune,目前大家命名相对还比较随意,你可以具体看相应的版本说明(一般来说完整版都比较大7G左右)。但如果只是自己使用的话,不用太在意这些。
NovelAI出的大模型介绍
NovelAI(小说AI)是一家领先的人工智能公司,致力于开发先进的大模型来支持各种自然语言处理任务和创作需求。以下是NovelAI出的一些重要大模型的介绍:
- GPT-Neo:
- GPT-Neo是NovelAI推出的一个强大的自然语言处理模型。它基于GPT-3的架构,但经过了精细的调整和优化,以提供更好的性能和效率。GPT-Neo在文本生成、文本分类、对话生成等任务中表现出色。
- NovelGPT:
- NovelGPT是NovelAI的自有模型,专注于文学创作和小说生成。它被训练成了一位文学家的风格,可以生成具有文学品质的故事、诗歌和小说段落。NovelGPT的出现为创作者提供了一个强大的工具,用于创作引人入胜的文学作品。
- CodeGPT:
- CodeGPT是NovelAI专为编程任务而设计的模型。它可以理解和生成多种编程语言的代码,帮助开发人员在编写软件时提供有力的支持。CodeGPT的智能提示和代码生成功能大大提高了编程的效率和准确性。
- ChatGPT:
- ChatGPT是NovelAI的对话生成模型,具有出色的自然语言理解和生成能力。它被广泛用于构建智能聊天机器人、在线客服系统和虚拟助手。ChatGPT可以进行有意义的对话,并提供有益的回应。
- LegalGPT:
- LegalGPT是专门为法律领域而设计的大模型。它可以帮助律师和法律专业人士分析法律文件、起草合同、回答法律问题等。LegalGPT的法律知识和专业性使其成为法律实践中的有力助手。
这些大模型是NovelAI在不同领域和应用中的杰出成果。它们不仅具有强大的自然语言处理能力,还为各种领域的专业人士和创作者提供了有力的工具,以应对各种复杂的任务和挑战。NovelAI不断推出创新性的大模型,以推动人工智能技术的发展,并满足不同行业的需求。
NovelAI出的大模型,final-prune是剪枝版,animefull-latest是完整版,不自己练模型的话,没有太大差别。
NovelAI的大模型已经比Stable-Diffusion自带的大模型好很多了,至少可以出图了。什么都能画,但是没有什么特色,也没有什么专长。属于中规中矩的中性基础模型。
Stable Diffusion的二次元模型
Stable Diffusion模型不仅在现实世界的图像生成中表现出色,还在二次元领域崭露头角。以下是Stable Diffusion的一些重要二次元模型的介绍:
- KawaiiMix(可爱混合):
- KawaiiMix是Stable Diffusion中备受欢迎的二次元模型之一。它专注于生成可爱、卡哇伊的二次元角色和场景。KawaiiMix模型以其独特的风格和细节而闻名,使用户能够创作出令人惊叹的萌系作品。
- AnimeVibes(动漫氛围):
- AnimeVibes模型专注于捕捉动漫的氛围和情感。它可以生成富有情感和戏剧性的二次元场景,使用户能够创造出引人入胜的故事情节和角色互动。
- FantasyWorld(奇幻世界):
- FantasyWorld模型旨在生成奇幻世界的图像和场景,包括魔法、精灵、巫师等元素。它为创作者提供了一个创作神奇冒险故事和幻想世界的理想工具。
- MagicalGirls(魔法少女):
- MagicalGirls模型专注于生成充满魔法和魔法少女的图像。它可以创造出充满魔法力量的二次元角色,为创作者提供了丰富的魔法世界的素材。
- CyberPunkAnime(赛博朋克动漫):
- CyberPunkAnime模型将二次元动漫与赛博朋克风格相结合。它生成未来科技和赛博空间的图像,为那些热衷于未来科幻的创作者提供了创作灵感。
这些Stable Diffusion的二次元模型丰富了创作者在二次元领域的创作选择。无论您是喜欢可爱风格、奇幻冒险、魔法世界还是赛博朋克风格,都可以找到适合您需求的模型,帮助您创作出独一无二的二次元作品。这些模型的出现拓展了二次元创作的可能性,让您的创意得以充分发挥。
Anything系列
Anything系列是一个以二次元漫画为主打的模型,一直也比较火。版本也比较多,包括Anything-V3.5,Anything-V4.0,Anything-V4.5,Anything-V5.0等等,不同版本下还有各类变形版本和剪枝版本。推荐下载4.0或者更新的版本,不过目前4.0版本已经能做到非常不错的效果。
值得注意的是,Anything系列出图效果好,但是风格比较单一,对关键词的要求不太高。
Anything V4模型的介绍
Anything V4 是Stable Diffusion模型中备受欢迎的一个版本。这个模型以其卓越的图像生成能力和多样性而闻名。下面是 Anything V4 模型的一些关键特点和介绍:
- 多样性和创造力:Anything V4 模型具有出色的多样性,可以生成各种风格和类型的图像。从写实到抽象、从风景到人物,这个模型可以满足各种创作者的需求。
- 高分辨率:Anything V4 支持高分辨率图像生成,包括 8K 分辨率。这意味着它可以生成极其清晰和细节丰富的图像,适合印刷、展示和高品质媒体制作。
- 杰作级质量:Anything V4 模型被设计为能够生成杰作级质量的图像。无论是在艺术作品还是商业项目中,这个模型都能够产生引人注目的图像。
- 广泛应用:Anything V4 模型在许多领域都有广泛的应用,包括艺术创作、设计、广告、游戏开发等。它为创作者提供了一个全面的创作工具,可以应对各种不同的创作任务。
- 社区支持:Anything V4 模型得到了庞大的社区支持,有许多创作者和开发者不断改进和优化这个模型,以确保它能够达到最高水平的性能和质量。
总的来说,Anything V4 模型是Stable Diffusion中的一颗明星,以其多样性、高分辨率和杰作级质量而脱颖而出。它为创作者提供了一个强大的工具,用于生成令人印象深刻的图像,无论是在艺术领域还是商业应用中,都能够发挥其潜力。
我随手用Anything-V4.0跑了一些图,大家可以看下它的风格。
Hassaku 系列模型是一组在Stable Diffusion框架下开发的一系列强大的生成模型,它们专注于图像生成领域。以下是 Hassaku 系列模型的一些关键特点和介绍:
多样性与细节:Hassaku 系列模型以其出色的多样性和细节丰富的图像生成而著称。无论是自然景色、人物角色还是抽象艺术,这些模型都能够生成高质量的图像。
高分辨率支持:Hassaku 系列模型支持高分辨率图像生成,可以生成高清晰度的图像,适用于各种应用,包括印刷、电影制作和虚拟现实。
多领域应用:这些模型在许多领域都有广泛的应用,包括艺术创作、电影特效、游戏开发和设计等。它们为创作者提供了灵活的工具,可以满足各种创作需求。
社区支持:Hassaku 系列模型得到了庞大的社区支持,许多热心的创作者和开发者不断改进和优化这些模型,以确保它们保持在技术的最前沿。
可定制性:Hassaku 系列模型提供了许多可定制的参数和选项,使创作者能够根据自己的创作需求进行调整和优化,实现个性化的图像生成。
总的来说,Hassaku 系列模型代表了Stable Diffusion框架中图像生成领域的顶尖技术。它们以其多样性、高分辨率和灵活性而备受欢迎,为创作者提供了一个有力的工具,用于创作出令人印象深刻的图像作品。无论是在艺术创作领域还是在技术应用中,这些模型都发挥了重要作用。
提示词:masterpiece, best quality, 1girl, red eyes, white hair, mechanical legs, raincoat, black gloves, black coat, raining, sky, ruins, rifle, headset, rubble, android, long hair, halo, detailed eyes
反向提示词:(worst quality, low quality:1.4),
效果如下:
Cetus-Mix这是一个二次元的混合模型,融合了很多二次元的模型,实际使用效果还不错。对提示词的要求不高。
Cetus-Mix 模型是一款强大的生成式模型,它在Stable Diffusion框架下开发,专注于图像生成和创作领域。以下是 Cetus-Mix 模型的一些关键特点和介绍:
- 多样性和创造力:Cetus-Mix 模型以其卓越的多样性而著称,它可以生成各种风格和类型的图像。从写实风格到抽象艺术,从风景到人物,这个模型具有出色的创造力。
- 高分辨率支持:Cetus-Mix 模型支持高分辨率图像生成,包括 8K 分辨率。这使它能够生成极为清晰和细节丰富的图像,适合印刷、展示和高品质媒体制作。
- 应用广泛:这个模型在许多领域都有广泛的应用,包括艺术创作、设计、广告、电影特效等。它为创作者提供了一个全面的创作工具,可以满足各种不同的创作任务。
- 社区支持:Cetus-Mix 模型得到了庞大的社区支持,许多创作者和开发者不断改进和优化这个模型,以确保它能够保持在技术的最前沿。
- 可定制性:Cetus-Mix 模型提供了许多可定制的参数和选项,使创作者能够根据自己的创作需求进行调整和优化,实现个性化的图像生成。
总的来说,Cetus-Mix 模型代表了Stable Diffusion框架中图像生成领域的杰出成果。它以其多样性、高分辨率和灵活性而备受欢迎,为创作者提供了一个有力的工具,用于创作引人注目的图像作品。无论是在艺术领域还是在商业应用中,这个模型都发挥了重要作用。
提示词:1girl,cetus,coda,ocean
反向提示词:lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry
效果如下:
写实类的大模型:Chilloutmix/Chikmix
Chilloutmix就是大名鼎鼎的亚洲美女模型。市面上你看到的大量的AI美女,基本上都是这个模型生成的。当时最火的图应该下面这个系列。也正是这个模型,让AI绘画彻底出圈。发布不到1个月的时间,这个模型就已经拥有了11万的下载量。
下面是效果:
Deliberate系列,目前最新版本是deliberate_v2,这个模型是一个万能模型,可以画能任何你想要的东西。风格上偏油画和数绘风格。值得注意的是,这个模型的提示词必须非常详细地填写。
Realistic Vision系列,是写实风格的模型,比较适合人物和动物。
下面是生成的效果:
2.5D/数绘风格大模型:PerfectWorld,主要绘制欧美风格的美女,不过偏2.5D,介于动漫和写实之间。产图基本默认NSFW,需要谨慎使用。
下面是效果图
国风系列大模型:GuoFeng3.3,这是一个中国华丽古风风格模型,也可以说是一个古风游戏角色模型,具有2.5D的质感。
欢迎使用GuoFeng3模型 - 这是一个中国华丽古风风格模型,也可以说是一个古风游戏角色模型,具有2.5D的质感。
GuoFeng3:原始模型
GuoFeng3.1:对GuoFeng3人像进行了微调修复
GuoFeng3.2:如果你不知道选择GuoFeng3还是GuoFeng2,可以直接使用此版本
GuoFeng3.2_light:通过GuoFeng3.2融合了基于 Noise Offset 训练的Lora使得模型能够画出更漂亮的光影效果(Lora:epi_noiseoffset/Theovercomer8’s Contrast Fix)
GuoFeng3.3:此版本是基于3.2的一次较大的更新与改进,可以适配full body,即使你的tag不太好,模型也会对画面进行自动修改,不过因此模型出的脸会比较雷同。
GuoFeng3.4:此版本重新进行了新的训练,适配全身图,同时内容上与前几个版本有较大不同。并调整了整体画风,降低了过拟合程度,使其能使用更多的lora对画面与内容进行调整。
此版本建议的关键词 - Suggested keywords for this version:
best quality,masterpiece,highres,cg,
//你的tag位置-Your tag location
lighting,candid,Photograph,high resolution,4k,8k,Bokeh,
此版本重新进行了新的训练,适配全身图,同时内容上与前几个版本有较大不同。并调整了整体画风,降低了过拟合程度,使其能使用更多的lora对画面与内容进行调整。
**介绍:**此版本是基于3.2的一次较大的更新与改进,可以适配fullbody,即使你的tag不太好,模型也会对画面进行自动修改,不过因此模型出的脸会比较雷同。
如果觉得年龄较小,可以尝试使用其它的人物Lora或改进TAG。
此模型似乎不需要超分,我的出图大小是768*1024,清晰度还不错。建议竖图,横图可能不清晰。
Eulera即可。(DPM++SDEKarras,DDIM也不错)
出图效果如下:
特定风格大模型:CrispMix,这个模型主要强调一种明快清爽的画风,比起油画和厚涂类模型,表现阴影的色块面积较为控制,画面整洁干净,非常适合时尚服装的展示。
这个CKPT主要强调一种明快清爽的画风,比起油画和厚涂类模型,表现阴影的色块面积较为控制,画面整洁干净,非常适合例图中时尚服装的展示。
出图效果如下:
关于AI绘画技术储备
学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!
对于0基础小白入门:
如果你是零基础小白,想快速入门AI绘画是可以考虑的。
一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案
包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!
需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
】
1.stable diffusion安装包 (全套教程文末领取哈
)
随着技术的迭代,目前 Stable Diffusion 已经能够生成非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替代,比如制作一个 logo 图片,画一张虚拟老婆照片,画质堪比相机。
最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!此外还带来了Mac版本,仅支持macOS 12.3或更高版本。
2.stable diffusion视频合集
我们在学习的时候,往往书籍代码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入门stable diffusion,科学有趣才能更方便的学习下去。
3.stable diffusion模型下载
stable diffusion往往一开始使用时图片等无法达到理想的生成效果,这时则需要通过使用大量训练数据,调整模型的超参数(如学习率、训练轮数、模型大小等),可以使得模型更好地适应数据集,并生成更加真实、准确、高质量的图像。
4.stable diffusion提示词
提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。
5.AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】