Stable Diffusion 详解

已于 2024-04-17 21:34:57 修改
阅读量571 收藏 8
点赞数 13
分类专栏： Diffusion Model 文章标签： stable diffusion
于 2024-03-10 13:55:41 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013308709/article/details/136599815
版权

整体目标

  • 文本生成图片；文本+图片生成图片
    在这里插入图片描述

网络结构

  • CLIP的文本编码器和图片生成器组成在这里插入图片描述
  • 图像生成器，输入是噪声经过UNet得到图像特征，最后解码得到图像
    在这里插入图片描述
    在这里插入图片描述

前向扩散

在这里插入图片描述
在这里插入图片描述

  • 模型直接预测图片难度比较大，所有让模型预测噪音然后输入-噪音可得到原图
    在这里插入图片描述

逆向扩散

在这里插入图片描述

预测模型UNet

在这里插入图片描述

  • 改进后的UNet
    在这里插入图片描述
    在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

代码讲解

参考链接

WindyChanChan
关注
  • 13
    点赞
  • 踩
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Stable Diffusion 超详细讲解
略懂……略懂……
06-03 1万+
本文将在《Stable Diffusion原理详解》和《Diffusion Model 深入剖析》这两篇文章的基础上，进一步细致地讲解 Stable Diffusion 的算法原理。
保姆级讲解 Stable Diffusion
WGS.
04-03 1535
保姆级讲解 Stable Diffusion
Stable Diffusion Webui源码剖析
benben044的专栏
08-11 5293
遍历callback_map['callbacks_model_loaded']所有的回调函数，然后把sd_model模型传进去依次执行这些回调函数。接着用OmegaConf.load加载yaml文件，然后通过/data/work/xiehao/stable-diffusion-webui/repositories/stable-diffusion-stability-ai/ldm/util.py(82)instantiate_from_config()加载yaml信息获得model。
十分钟读懂Stable Diffusion运行原理
weixin_40920183的博客
05-12 8863
作者：symonAIGC 热潮正猛烈地席卷开来，可以说 Stable Diffusion 开源发布把 AI 图像生成提高了全新高度，特别是 ControlNet 和 T2I-Adapter 控制模块的提出进一步提高生成可控性，也在逐渐改变一部分行业的生产模式。惊艳其出色表现，也不禁好奇其背后技术。本文整理了一些学习过程中记录的技术内容，主要包括 Stable Diffusion 技术运行机制，希望...
Stable Diffusion完整入门指南，保姆级教程！干货满满，建议收藏！
m0_59235945的博客
08-11 6604
这里分为三个部分：1. 提示词 2. 符号的使用 3. 图像的输出1. 提示词提示词分为正向和反向的生成图像时，我们可以使用正向提示词来指定想要生成的图像。正向提示词可以是脑子里想到的图片或一句话，将其拆分成不同的关键词，并用逗号隔开作为输入。需要注意的是，相同的指令在不同的模型库和参数下，生成的输出图像可能会不一样。此外，提示词的顺序也非常重要，因为它们的顺序会影响到生成图像的权重。通常情况下，越靠前的提示词权重越大，越靠后的提示词权重越小。
Stable Diffusion原理详解
热门推荐
略懂……略懂……
03-01 1万+
本文向大家介绍了图像生成领域最前沿的Stable Diffusion模型。本质上Stable Diffusion属于潜在扩散模型(Latent Diffusion Model)。潜在扩散模型在生成细节丰富的不同背景的高分辨率图像方面非常稳健，同时还保留了图像的语义结构。 因此，潜在扩散模型是图像生成即深度学习领域的一项重大进步。
Stable Diffusion详解
suqieer的博客
05-17 470
定义UNet模型，用于逐步去噪图像。# 定义UNet的各个层次nn.ReLU(),nn.ReLU()nn.ReLU(),nn.Tanh()return x。
Mac下Stable Diffusion一键安装
06-02
Stable Diffusion 一键安装，国内镜像，无需魔法，Apple Silicon (M1/M2)使用MPS支持GPU，可以根据任何领域的文本输入生成高质量、高分辨率且逼真的图像。 默认选项MAC M1 10秒出图
Stable Diffusion
04-03
Stable Diffusiond的一个简易的，有关furry类的embedding训练模型，C站我也有发布，是免费的，请不要直接用于商业，你用该模型，自己电脑gpu出图的版权均属于你。模型训练的时间约4个小时，3~4w条训练，所以画风改动...
Stable Diffusion提示词使用指南
06-29
Stable Diffusion提示词使用指南：一、基本概述 1、提示词通常是在文生图和图生图的时候会使用到。 2、提示词由多个描述性词汇组成，由逗号隔开，结尾不需要加分隔符(注:一般都是英文词汇和英文逗号) 例: lgirl,...
Stable Diffusion 教程、指令、图片（好用 难得）
04-14
Stable Diffusion正是目前超级流行的本地化部署的工程，他可以帮助你画出想要的图片，任何图片，人工智能（AI）绘画是指利用机器学习和深度学习技术来生成艺术作品的一种创造性应用。AI绘画可以在短时间内生成复杂的...
stable-diffusion部署需要的包
10-17
stable-diffusion部署需要的包
扩散模型Stable Diffusion
u011489887的专栏
06-09 302
Clip Text为文本编码器。以77 token为输入，输出为77 token 嵌入向量，每个向量有768维度。
Stable Diffusion之最全详解图解
DYFdingyifei的博客
06-11 518
稳定扩散模型的基本思想是，节点在网络上随机选择邻居节点进行转移，转移概率与节点之间的连接强度相关。具体来说，稳定扩散模型中的节点具有一个活跃度（活跃度可以理解为节点的扩散能力），节点的活跃度越高，其转移的概率越大。节点在每一步转移中，根据其活跃度随机选择一个邻居节点进行转移，直到达到一定的停止条件为止。总结起来，稳定扩散模型是一种基于随机漫步的扩散模型，可以用来描述节点在网络上的扩散过程。该模型基于节点的活跃度来确定转移概率，节点根据转移概率随机选择邻居节点进行转移。稳定扩散模型的应用非常广泛。
Stable Diffusion 【AI绘画提示词】摄影效果提示词，超美摄影效果摄影特效！让平凡的照片焕发出独特的魅力!
最新发布
2401_84815887的博客
06-15 488
AIGC（AI Generated Content）技术，即人工智能生成内容的技术，具有非常广阔的发展前景。随着技术的不断进步，AIGC的应用范围和影响力都将显著扩大。以下是一些关于AIGC技术发展前景的预测和展望：1、AIGC技术将使得内容创造过程更加自动化，包括文章、报告、音乐、艺术作品等。这将极大地提高内容生产的效率，降低成本。2、在游戏、电影和虚拟现实等领域，AIGC技术将能够创造更加丰富和沉浸式的体验，推动娱乐产业的创新。
【第5章】Stable Diffusion大模型（简介/两种版本/安装/模型推荐/使用方式）ComfyUI基础入门教程
聚梦小课堂
06-12 139
ComfyUI大模型教程，内容涵盖：什么是大模型？都有哪些版本？如何下载？如何安装？如何共用模型？不同风格的大模型推荐...
【Stable Diffusion】（基础篇二）—— Stable Diffusion图形界面介绍和基本使用流程
dao_cao_renshuai的博客
06-07 991
本文主要介绍Stable Diffusion的图形界面和该软件的基本使用流程
AI写真教程：Stable Diffusion 之 IPAdapter-FaceId
mate1357的博客
06-14 840
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。​AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
stable Diffusion
01-24
Stable Diffusion是一个用于稳定性分析的AI模型。它可以帮助用户评估和预测系统的稳定性，并提供相关的建议和解决方案。下面是关于Stable Diffusion的一些信息： 1. Stable Diffusion本地部署教程：你可以通过访问...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值