【ComfyUI教程】SD3.5：ControlNet重磅发布！激烈竞争能否夺回黑森林Flux高地？

最新推荐文章于 2025-01-13 10:26:01 发布

爱绘画的彤姐

最新推荐文章于 2025-01-13 10:26:01 发布

阅读量1k

点赞数 8

文章标签：人工智能 stable diffusion AIGC AI写真 AI作画 controlnet SD3.5

本文链接：https://blog.csdn.net/A2421417624/article/details/144259386

版权

SD3.5：ControlNet来袭

Stable Diffusion 3.5 Large ControlNet模型简介

今天Stability AI如约按照之前Stable Diffusion 3.5 Large模型发布时候的承诺，在SD3.5发布不到1个月时间再次发布了SD3.5 Large模型的ControlNet模型。同时当前ComfyUI也增加了对新的Stable Diffusion 3.5 Large ControlNet模型的支持。本次发布ControlNet模型共有3款，分别为：Blur、Canny和Depth。这3款模型都是各自拥有80亿参数，并且遵循宽松的Stability AI社区许可证，这些模型是可以在商业和非商业用途下免费使用。另外，官方也提到，Stable Diffusion 3.5 Medium (2B)变体和新的控制类型在内的额外ControlNet模型也即将推出！

• Blur模型：能够实现极高保真度的放大，包括8K和16K分辨率，非常适合将低分辨率图像平铺成大型详细视觉效果。
• Canny模型：利用Canny线稿边缘图来构建生成的图像结构，这种控制类型特别适合插画、建筑等场景，并且可以适应所有风格。
• Depth模型：使用DepthFM生成的深度图来引导图像生成，非常适合纹理3D主体等需要精确控制图像构图的场景。

题外话，在本次SD3.5 Large模型的ControlNet模型是在黑森林团队发布Flux ControlNet模型不到一周时间发布了SD3.5的ControlNet模型。在文生图的领域两家领头开源产厂商开始卷起来，SD3.5也在费力追赶当前Flux模型几乎占领文生图开源社区的局面。只有当lux模型具有较大的挑战，Flux1.1-Dev或其他更好的变体模型开源发布。

SD3.5 Large ControlNet模型 ComfyUI体验

首先需要更新最新的ComfyUI本体到最新版本，在最新ComfyUI中已原生支持了SD3.5 Large ControlNet模型。另外还需要下载额外的ControlNet模型(模型文末可获取)。

• all-in-one SD3.5 large模型：下载SD3.5模型并放置到ComfyUI/models/checkpoints目录下，下载地址：https://huggingface.co/Comfy-Org/stable-diffusion-3.5-fp8/resolve/main/sd3.5_large_fp8_scaled.safetensors
• SD3.5 Large ControlNet模型：下载SD3.5ControlNet模型并放置到ComfyUI/models/controlnet目录下。下载地址：https://huggingface.co/stabilityai/stable-diffusion-3.5-controlnets/tree/main

SD3.5文生图工作流

LIBLIB平台已在线支持SD3.5在线工作流体验，笔者上传了支持Joy1反推+SD3.5工作流地址：https://www.liblib.art/modelinfo/fb42d5cdd58644a2b28e86e2cfd28ac0?versionUuid=1189e755690f41dc933861cc9bc0c824

另外LIBLIBAI已支持本地客户端使用可首页（https://www.liblib.art）下载体验。

SD3.5 Large ControlNet模型工作流

SD3.5 Large ControlNet模型工作流已上传LIBLIB平台：

![](https://i-blog.csdnimg.cn/img_convert/3ab631c6f5691f4d177131cfebcdd985.png)

01. Blur高清-小黄鸭

高清质量表现很不错。

This is a digital photograph capturing a whimsical scene of a yellow rubber duck riding a wave. The duck, positioned centrally in the image, appears to be surfing the crest of a greenish-blue wave. The background features a stunning sunset with hues of orange, pink, and purple blending into the sky. The water reflects the warm colors of the sunset, adding to the serene and playful atmosphere. The overall effect is both surreal and heartwarming, blending the innocence of a toy with the grandeur of nature.

在这里插入图片描述

02.Canny线稿-建筑

Oriental architectural design,townhouses,80's houses,lawns,green trees

在这里插入图片描述

03.Canny线稿-线稿上色

cute anime girl , red long hair blue eyes wearing a blue sweater, Indoors

在这里插入图片描述

04.Canny线稿-写实

This is a CGI image of a majestic Bengal tiger with a striking, realistic texture. The tiger is mid-flight, wings spread wide, showcasing detailed feathers in shades of brown and black. Its fur is vivid orange with black stripes, and its piercing blue eyes are focused forward. The background features a dense, misty forest with tall, blurred trees, creating a sense of depth and motion. The overall composition combines elements of fantasy and realism, highlighting the tiger's grace and power.

05.Depth深度-人物

SD3.5的肢体处理仍然是老问题。

1girl , Asian woman, blonde long hair blue eyes wearing a pink sweater, Indoors, sit on the edge of the bed

网盘模型获取扫下图👇：

感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。

在这里插入图片描述