Stable Diffusion模型运算量分析

最新推荐文章于 2024-05-27 21:29:18 发布
最新推荐文章于 2024-05-27 21:29:18 发布
阅读量8.8k 收藏 12
点赞数 3
文章标签： 深度学习 人工智能
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/luoyu510183/article/details/127695184
版权

准备

模型的参数量和计算量参考: ThanatosShinji/onnx-tool: ONNX model's shape inference and MACs(FLOPs) counting. (github.com)这四个模型就是Stable Diffusion 1.4 最主要的4个onnx模型:

 github中的百度网盘可以下载带中间tensor shape的模型. 比如:

TextEncoder

这个模型很像BERT, 12 layers的Bert Base. 运算量6.7GMACs.

和 BertBase一样, 运算量98%都集中在MatMul上面.

 

这个token生成了1x77x768的hidden state需要送给UNetCondition.

UNet2DCondition

这个就是UNet

最低0.47元/天 解锁文章
Mr_L_Y
关注
  • 3
    点赞
  • 踩
  • 12
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
stable diffusion模型训练时数据量
liguandong
09-24 2725
laion2B-en数据集，是laion5B的一个子集，更具体的说它是laion-5B中的英文数据集，laion-5B是从网页数据common crawel中筛选出来的图像文本对，包含5.85B的图像文本对，其中文本为英文的数据量为2.32B，这就是laion-2B-en数据集。在laion-2B-en数据集上评分为5以上训练的，先用256x256，再用512x512，用了32台8卡A100 40G，bs=32x8x2x2=2048。在laion-2B-en数据集上评分为4.5以上训练的，
强大到离谱！硬核解读Stable Diffusion（完整版）
热门推荐
qq_41771998的博客
04-11 1万+
2022年可谓是，上半年有文生图大模型和，下半年有OpenAI的文本对话大模型问世，这让冷却的AI又沸腾起来了，因为AIGC能让更多的人真真切切感受到AI的力量。这篇文章将介绍比较火的文生图模型，Stable Diffusion不仅是一个完全开源的模型（代码，数据，模型全部开源），而且是它的参数量只有1B左右，大部分人可以在普通的显卡上进行推理甚至精调模型。毫不夸张的说，Stable Diffusion的出现和开源对AIGC的火热和发展是有巨大推动作用的，因为它让更多的人能快地上手AI作画。
Stable Diffusion模型对比
weixin_44733295的博客
01-08 1510
Stable Diffusion V1系列是用基于GPT的CLIP模型，其模型参数量为123.65M； Stable Diffusion V2系列则换成了更新更好的OpenCLIP模型，其参数量为354.03M，相比SD V1的Text Encoder模型大了3倍左右 Stable Diffusion v1：它使用了LAION-2B (en)数据集以及laion-high-resolution和laion-improved-aesthetics的子集进行训练。laion-improved-aesthet
关于Stable diffusion的各种模型，看这篇就可以了！
最新发布
m0_59163425的博客
05-27 1128
Stable diffusion的模型除了上述的分类之外，从用途上看，还分为官方模型、二次元模型（动漫）、真实系模型和2.5D模型四大类。4.1 官方模型官方模型有 1.X 和 2.X 两个大版本，目前在 1.X 中官方发布的有四个版本，分别是v1-1、v1-2、v1-3、v1-4。
关于AI绘画Stable diffusion的各种模型，看这篇就可以了！
白帽阿叁的博客
05-23 1069
Stable diffusion的模型除了上述的分类之外，从用途上看，还分为官方模型、二次元模型（动漫）、真实系模型和2.5D模型四大类。4.1 官方模型官方模型有 1.X 和 2.X 两个大版本，目前在 1.X 中官方发布的有四个版本，分别是v1-1、v1-2、v1-3、v1-4如无法下载，请看文末扫描获取。
Stable Diffusion 入门教程之参数详解（上）
meijinbo的专栏
03-17 1446
Stable Diffusion绘图参数在绘图过程中起着至关重要的作用，没有一个固定的搭配，可以通过调整这些参数来定制生成图像的风格、细节和构图，以满足不同的创作需求。然而，请注意，不同的参数设置可能会导致生成结果的巨大差异，因此建议在进行参数调整时进行多次尝试和比较，以找到最适合自己需求的设置。前几期必看文章：《Stable Diffusion绘图神器，2分钟极速安装教程！（提供安装包）》《Stable Diffusion 模型下载和使用方法》
图生图—AI图片生成Stable Diffusion参数及使用方式详细介绍
叶子的博客
05-16 1万+
本文为专栏《Python从零开始进行AIGC大模型训练与推理》系列文章，地址为“https://blog.csdn.net/suiyingy/article/details/130169592”。
AI绘画：超全Stable Diffusion详解之常用参数设置
白帽阿叁的博客
01-24 2760
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程，具体看下方。一、AIGC所有方向的学习路线。
AI图片生成Stable Diffusion参数及使用方式详细介绍
叶子的博客
05-09 5347
AI图片生成Stable Diffusion参数及使用方式详细介绍，Python从零开始进行AIGC大模型训练与推理。
全网最全讲解Stable Diffusion原理，小白也能看懂！速来！！！
不定期分享ai绘画相关知识~
12-30 2631
如果不解释无分类器引导（Classifier-Free Guidance，CFG），这篇文章将是不完整的，这是AI艺术家每天调来调去的值。要了解它是什么，我们需要首先触及它的前身，分类器引导（Classifier Guidance）。
Stable Diffusion入门笔记（自用）
weixin_56537692的博客
07-22 1712
ps:在词的右边按住ctrl+上下键，快捷添加权重。若如此做，是添加一整行的权重。提示词引导系数（CFG scale）:AI忠实于关键词的系数。采样算法：使用带+号的更稳定。模型的作者一般待用推荐的采样算法。（关键词，框内想实现的效果的关键词）在图生图中，点击反推提示词，能获取到AI认为该图存在的特征。词嵌入：输入一个词，就能在prompt中补全这个词的特征。图片参数：原图片的比例是多少，生成图片的比列也要对照。（关键词：全图的关键词）蒙版透明度，自己绘制的蒙版色彩影响结果的程度。
Stable Diffusion 真人模型 3D仿真模型
10-19
AI绘画 Stable Diffusion真人模仿仿真3D效果 AI绘画 Stable Diffusion真人模仿仿真3D效果 AI绘画 Stable Diffusion真人模仿仿真3D效果 AI绘画 Stable Diffusion真人模仿仿真3D效果 AI绘画 Stable Diffusion真人...
stable diffusion webui lora模型
04-07
stable diffusion webui lora模型 stable diffusion webui lora模型 stable diffusion webui lora模型 stable diffusion webui lora模型 stable diffusion webui lora模型 stable diffusion webui lora模型 stable ...
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
02-23
Stable Diffusion WebUI Forge版ControlNet模型资源包下载
AI绘图 Stable diffusion checkpoint模型 ckpt模型 vae模型 Counterfeit-V2.5
04-25
超级漂亮的二次元模型 ...把ckpt模型放在models\Stable-diffusion\下 把vae模型放在models\VAE\下 把embedding模型放在\embeddings\下 把lora模型放在 \extensions\sd-webui-additional-networks\models\lora\下
Stable Diffusion -lora模型
02-19
提供了3个画风模型和6个真人模型，都是我精挑细选的lora模型
2024不可不会的StableDiffusion之变分自编码器（三）
sgzqc的专栏
01-30 1333
接着我们来实现用VAE上述函数，接收图像和我们的变分自编码器作为输入，通过调用vae中的encode函数来实现将输入的image转化为潜在低纬度特征向量。本文重点介绍了SD模型中的变分自编码器VAE的相关功能和具体工作原理，并详细介绍了其编码器和解码器的操作步骤，并给出了相应的代码示例。您学废了嘛！
【2024版】最新保姆级stable diffusion安装教程，小白直接点！一键安装，永久使用，stable diffusion下载安装教程！
不定期分享ai绘画相关知识~
12-28 6034
从图中可看出，与 AMD 或英特尔的任何产品相比，Nvidia 的 GPU 提供了卓越的性能–有时是以巨大的优势。关于现在非常红火的AI绘画，很多感兴趣的人不知道如何入手，如果你的电脑配置足够好，那么不要犹豫，让我来教你如何在本地电脑全免费运行当下最强大的AI绘画工具——Stable Diffusion 吧！Stable Diffusion Web UI提供了易于使用的图形界面，可以帮助用户更直观地了解和使用Stable Diffusion的功能，并在基本不需要编写代码的情况下启动和监视训练过程。
stable diffusion模型训练
04-17
Stable diffusion模型是一种用于研究动态网络的模型，其中网络中的节点之间的联系是不断变化的。它被用来研究在网络中传播的信息、行为或意见如何影响网络中的其他节点。 训练stable diffusion模型的方法通常包括以下步骤： 1. 准备数据：需要准备一组动态网络数据，这些数据记录了每个节点在不同时间段内与其他节点的连接情况。 2. 选择模型：可以使用现有的stable diffusion模型或自己开发新模型。 3. 训练模型：使用机器学习算法（如支持向量机、神经网络等）训练模型，使其能够根据动态网络中的信息传播情况预测网络中的其他节点会受到什么影响。 4. 评估模型：使用模型预测的结果与实际情况进行比较，评估模型的准确性。 5. 调整模型：如果模型的准确性不够高，可以调整模型的参数或使用其他机器学习算法来提高模型的准确性。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值