快来!Stable Diffusion 3终于开源了,12GB可跑!

Stable Diffusion 3终于开源了,2B参数的Stable Diffusion 3 Medium模型已经可以在HuggingFace上下载了:

https://huggingface.co/stabilityai/stable-diffusion-3-medium

img

Stable Diffusion 3 Medium的参数量为2B,大小适中,它非常适合在消费级个人电脑和笔记本电脑上运行,同时也适用于企业级GPU。

SD3 Medium的优势如下所示:

  • 照片级真实感:克服了手部和面部常见的伪影问题,无需复杂的工作流程即可提供高质量的图像。
  • 提示词遵循性:理解涉及空间关系、构图元素、动作和风格的复杂提示。
  • 文字能力:借助Diffusion Transformer架构,在生成无伪影和拼写错误的文本方面取得了前所未有的成果。
  • 资源高效:由于其低VRAM占用,非常适合在标准消费级GPU上运行,且不降低性能。
  • 微调:能够从小数据集中吸收细微的细节,使其非常适合定制化。

img

另外,StabilityAI与NVIDIA合作,利用TensorRT来提升所有Stable Diffusion模型的性能,包括Stable Diffusion 3 Medium。经过TensorRT优化的版本,性能提升了50%,Stable Diffusion 3 Medium的TensorRT优化版本也将发布。

而且,AMD也已经针对包括AMD最新的APU、消费级GPU和MI-300X企业级GPU在内的各种AMD设备,对SD3 Medium的推理进行了优化。

除了模型之外,StabilityAI还直接放出了SD3的ComfyUI工作流:

img

实测comfyui上12GB显存就可以跑了:

img
简单测试一下例子:

A closeup shot of a beautiful teenage girl in a white dress wearing small silver earrings in the garden, under the soft morning light

img

人物写真还行

A realistic standup pouch product photo mockup decorated with bananas, raisins and apples with the words “ORGANIC SNACKS” featured prominently

img

文字OK

Wide angle shot of Český Krumlov Castle with the castle in the foreground and the town sprawling out in the background, highly detailed, natural lighting

img

这个建筑质量一般了

A magazine quality shot of a delicious salmon steak, with rosemary and tomatoes, and a cozy atmosphere

img

中等,就是不够真

A pixar style illustration of a happy hedgehog, standing beside a wooden signboard saying “SUNFLOWERS”, in a meadow surrounded by blooming sunflowers

img

还行

A very simple, clean and minimalistic kid’s coloring book page of a young boy riding a bicycle, with thick lines, and small a house in the background

img

可以

an old apothecary. On the counter there are three old potions: a blue potion with the handwritten label “Mana” a green potion with the label “Health”, a red potion with the label “Poison”

img

这个难度很高,但是对了

photo of three people, a wizard holding the sign with the text “Magic”, a witch with the sign “Hex” and another alchemist with the sign with the text “potions”. Indoor scene, colored signs

img

这个差一点

A horse riding an astronaut.

img

马还是骑不了人

A stack of 3 plates. A blue plate is on the top, sitting on a blue plate. The blue plate is in the middle, sitting on a green plate. The green plate is on the bottom.

img

这个差不多对

A wine glass on top of a dog.

img

位置关系表现比较稳

Elon Muskis swimming

img

名人丢了

总结,SD3的能力确实强,但是图像质量相比Midjourney还是差一点。

而且目前SD3已经在diffusers中支持了:Diffusers welcomes Stable Diffusion 3。

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

👉[[CSDN大礼包:《StableDiffusion安装包&AI绘画入门学习资料》免费分享]]安全链接,放心点击

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

1.stable diffusion安装包 (全套教程文末领取哈)

随着技术的迭代,目前 Stable Diffusion 已经能够生成非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替代,比如制作一个 logo 图片,画一张虚拟老婆照片,画质堪比相机。

最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!此外还带来了Mac版本,仅支持macOS 12.3或更高版本

在这里插入图片描述

2.stable diffusion视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入坑stable diffusion,科学有趣才能更方便的学习下去。

在这里插入图片描述

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果,这时则需要通过使用大量训练数据,调整模型的超参数(如学习率、训练轮数、模型大小等),可以使得模型更好地适应数据集,并生成更加真实、准确、高质量的图像。

在这里插入图片描述

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。

在这里插入图片描述

5.SD从0到落地实战演练

在这里插入图片描述

如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名SD大神的正确特征了。

这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

<think>好的,用户想了解Stable Diffusion是否免费开源。首先,我需要确认用户的问题核心,他们可能对Stable Diffusion开源状态和费用有疑问。根据提供的引用资料,引用[1]提到Stable Diffusion开源免费的,并且可以通过参数调整,比Midjourney更良心。引用[3]和[2]指出Stable Diffusion 3已经正式开源,并且有免费在线试用链接。引用[4]提到核心团队离职可能影响项目,但社区可能帮助克服挑战,而引用[5]则介绍了SD3的技术优势。 接下来要组织回答结构,首先直接回答问题:是的,Stable Diffusion是免费开源的。然后分点详细说明,包括历史版本的开源情况,SD3的最新进展,开源的影响,以及未来的不确定性。需要引用相关引用资料来支持每个观点,比如引用[1]、[3]、[2]证明开源和免费,引用[4]讨论潜在风险,引用[5]强调技术优势。同时,要确保回答符合用户层的要求,结构清晰,真实可靠。最后生成相关问题,帮助用户深入理解。</think>是的,Stable Diffusion 是免费且开源的。以下是详细说明: ### 1. **历史版本的开源情况** Stable Diffusion 自 2022 年发布以来,始终以开源形式向公众开放。其代码和模型权重均托管在 GitHub 等平台,允许用户自由下载、修改和商业化使用[^1]。例如: ```python # 典型调用示例(基于Hugging Face库) from diffusers import StableDiffusionPipeline pipe = StableDiffusionPipeline.from_pretrained("stabilityai/stable-diffusion-2") ``` ### 2. **Stable Diffusion 3 的最新进展** 2024 年 6 月,Stability AI 正式开源了 **Stable Diffusion 3 Medium** 版本。该版本采用多模态扩散变换器(MMDiT)架构,显著提升了图像生成质量和复杂提示理解能力[^5]。用户可通过官方平台免费试用: $$ \text{在线试用地址:} \href{https://huggingface.co/spaces/stabilityai/stable-diffusion-3-medium}{Stable Diffusion 3 Medium} $$ ### 3. **开源带来的优势** - **技术透明性**:开发者可深入理解模型架构并自定义训练流程 - **成本优势**:相比 Midjourney 等付费工具,本地部署无需订阅费用[^1] - **生态扩展**:开源社区已衍生出 ControlNet、LoRA 等增强插件 ### 4. **潜在不确定性** 虽然当前版本保持开源,但核心团队离职事件可能影响后续更新节奏[^4]。不过开源协议确保了现有代码的持续可用性,社区维护的衍生项目(如 SDXL Turbo)仍会推进发展。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值