SD3开放权重下载，效果惊艳！附comfyUI工作流教程

最新推荐文章于 2024-09-20 14:11:29 发布

程序员超超

最新推荐文章于 2024-09-20 14:11:29 发布

阅读量1.5k

点赞数 23

本文链接：https://blog.csdn.net/2401_85116933/article/details/139652343

版权

6月12日，众所瞩目的StableDiffusion3 开源了。这个版本实在来之不易，StabilityAI公司老板跑路了，开源计划差点流产。

现在开源的是SD3 medium 2B参数的版本。它的 4B 和 8B 版本还在训练。AI大善人也要吃饭，也要养活员工，后面还会不会开源就不好说了。

我们先来看看SD3生成的效果吧。（文末扫码可获取SD工作流和模型文件）

这是官方给出来的生成效果图，也附带了提示词，下面是第一张图片的提示词。

a female character with long, flowing hair that appears to be made of ethereal, swirling patterns resembling the Northern Lights or Aurora Borealis. The background is dominated by deep blues and purples, creating a mysterious and dramatic atmosphere. The character’s face is serene, with pale skin and striking features. She wears a dark-colored outfit with subtle patterns. The overall style of the artwork is reminiscent of fantasy or supernatural genres

此外，我也找了一些Midjourney的咒语，看生成的图片对比。

A group of animals in the seaside, Hayao Miyazaki

SD3

再来一个

拟人化一只超级可爱的粉红色仙女中国狐狸，女孩，狐狸，穿着优雅的斗篷，甜美的笑容，白色的皮毛，明亮的大眼睛，毛茸茸的尾巴，云朵轻轻地飘着，非常详细的 3d 动画，超级逼真，超级详细，豪华电影灯光， Octaneendering，zbrush，personification a super cute pink fairychinese fox, girl, fox, wears an elegant cloak, a sweetsmile, white fur, bright big eyes, and a fluffy tail, withclouds floating gently, extremely detailed 3danimation, super lifelike, super detailed, luxurymovie lighting, octaneendering,zbrush

SD3

总结来看，SD3有下面几个特点

1. 生成的效果确实非常好，细节刻画精致，现实风格的图片几乎没有什么AI感。画面效果和MJ相比，不相上下，MJ想象更丰富一些，SD3可以通过参数调整是更偏向提示词还是让AI更多自由发挥。

2. 出图率很高，几乎不太会出现缺胳膊少腿，脸部扭曲的问题。（简单加了一些负面提示词，测试了一下不加通常也不会出错）

bad quality, poor quality, doll, disfigured, jpg, toy, bad anatomy, missing limbs, missing fingers, 3d, cgi

3. 提示词可以用自然语言描述，不需要像之前那样拼一堆复杂的咒语，上手难度降低。

4. 生成的图片可以包含文字（目前只支持英文）

5. 生成速度略慢于sdxl，我用的p40卡，生成一张1024x1024的图片，28步，大约要1分钟。

6. 目前用的是官方原版模型，借鉴1.5和xl的经验，后续社区会出不少微调模型，在画质、风格上还会有提升。如果做出turbo蒸馏模型，出图速度也会提高。

可以说SD3模型，已经能满足各种场景的生产环境使用了。接下来国产模型们也抓紧时间更新吧。

怎么体验呢？现在ComfyUI已经支持sd3。接下来我告诉大家详细的步骤。

首先安装comfyUI，推荐用秋叶的一键安装包，自行百度下载。更新到最新的版本。

然后在huggingface上下载模型。

https://huggingface.co/stabilityai/stable-diffusion-3-medium/tree/main

模型文件总共有4个，1个是checkpoint模型，3个是clip模型。下载后放在comfyui的model对应目录下。

启动ComfyUI，加载demo工作流，在load models中重新选择一下模型。

然后就可以使用了。

有些朋友如果上不了huggingface，工作流和模型文件，我已经打包好了，赶紧文末扫码找我获取文件吧。

写在最后

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。