stable diffusion基础

已于 2023-08-17 23:32:17 修改
阅读量2.1k 收藏 1
点赞数
文章标签： stable diffusion 人工智能
于 2023-08-17 12:28:41 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_39515892/article/details/132336414
版权

整合包下载：秋叶大佬 【AI绘画·8月最新】Stable Diffusion整合包v4.2发布！
参照：基础04】目前全网最贴心的Lora基础知识教程！

VAE

作用：滤镜+微调
在这里插入图片描述
VAE下载地址：C站（https://civitai.com/models）或者启动器下载
在这里插入图片描述
VAE存放路径：sd-webui-aki-v4\models\VAE

Embedding

又名textual inversion，中文名嵌入or文本反转，通俗理解：提示词打包（宏）
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

Lora

英文全称Low-Rank Adaptation of Large Language Models，直译为大语言模型的低阶适应，这是微软的研究人员为了解决大语言模型微调而开发的一项技术
存放路径：sd-webui-aki-v4\models\Lora
功能1：对人物和物品的复刻
在这里插入图片描述
功能2：训练画风
在这里插入图片描述
功能3：固定人物的动作特征
在这里插入图片描述
在这里插入图片描述

Embeddings和Lora的区别

Embeddings文件大小几KB或几十KB,Lora几MB-一百多MB之间，Lora在做各种特征还原的时候效果要比Embeddings好得多
Embeddings不可取代的地方：比如三视图的功能，或者多视图的人物展现功能
在这里插入图片描述
在这里插入图片描述

Hypernetwork 训练画风

超网格（低配版的Lora），与Lora和Embedding类似，都是对生成的图片进行针对性的调整。主要用于训练画风，训练难度很大。最大优点：实现对画面风格的转变。
在这里插入图片描述
在这里插入图片描述
Hypernetwork通过训练可以非常神似地对角色或物件进行还原，但只能是神似，此功能比较少用到。如果想进一步更高精度的还原，还需要借助Lora乃至于Dreambooth进行训练
在这里插入图片描述
使用注意事项：
1.权重
2.用超网格配套的大模型效果更好
3.最好使用和超网格作者相同的参数
4.有触发词一定要使用触发词
5.新手尽量不要混用超网格

模型文件类型鉴别网站

秋叶的模型类型分辨工具地址：https://spell.novelai.dev/

xklcy
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Stable Diffusion基础
zwlww1的博客
01-12 456
Stable Diffusion 本地部署教程
热门推荐
ellija的博客
03-25 18万+
最近看Stable Diffusion开源了，据说比Disco Diffusion更快，于是从git上拉取了项目尝试本地部署了，记录分享一下过程~这里是官网介绍：https://stability.ai/blog/stable-diffusion-public-release。
stable diffusion原理
ChrisWy26的博客
01-14 1万+
Stable diffusion相关资料汇总
Stable Diffusion学习指南【模型篇】
探索AIGC领域的体验设计师
09-12 1644
今天我将带你深入学习Stable Diffusion模型的类型、差异以及使用技巧，同时也能帮助你建立对开源模型的基础认知框架，全篇没有干货都是感情，快来看看吧～
全网第一个系统的stable diffusion基础课，新手入门必看（下载地址）.txt
08-21
### Stable Diffusion基础课程知识点概览 #### 一、Stable Diffusion简介 - **定义与背景**：Stable Diffusion是一种基于深度学习技术的文本到图像生成模型，由Runway ML开发。它通过理解输入的文本描述来生成相应...
Stable diffusion零基础课程-视频课程资源网盘链接提取码下载 .txt
02-28
### Stable Diffusion 零基础课程知识点概览 #### 一、Stable Diffusion 基础概念 **1.1 扩散现象定义** 扩散是指物质或能量从高浓度区域向低浓度区域自然移动的过程。在自然界和工业生产中普遍存在，如气体混合...
零基础自建Stable Diffusion绘图教程-AutoDL
07-06
【零基础自建 Stable Diffusion 绘图教程-AutoDL】是一篇面向初学者的教程，旨在指导读者如何在没有专业 IT 知识的情况下搭建一个用于 Stable Diffusion 绘图的环境。Stable Diffusion 是一种人工智能算法，常用于...
全网第一个系统的stable diffusion基础课，新手入门必看AI训练营
10-19
全网第一个系统的stable diffusion基础课，新手入门必看【AI训练营】 现在将爱心新手整合包及视频所需其他资料汇总到网盘里，考虑到网盘下载的速度比较快可以更加便利大家~ 全网第一个系统的stable diffusion基础...
Stable Diffusion入门.pdf
05-09
**Stable Diffusion基础操作** 使用 Stable Diffusion 主要有以下几个步骤： 1. **启动软件**：导航至安装目录，双击 Stable Diffusion 程序图标启动。 2. **生成图像**：在文本输入框中输入你想要生成图像的描述，...
Stable Diffusion的微调方法原理总结
hjhr2018的博客
08-21 647
由于LoRA是将矩阵压缩到低秩后训练，所以LoRA网络的参数量很小（千分之一），训练速度快。具体做法是，加入一个新词（sks）代表subject，embedding初始值继承原类型的词的embedding。损失函数加入了监督功能，去监控漂移现象，防止灾难性遗忘“学会新的忘了旧的”。LoRA的网络是一种additional network，LoRA训练不改变基础模型的任何参数，只对附加网络内部参数进行调整。完全不改变神经网络中的任何参数。TI的简洁激发了很多研究者的灵感，基于TI思路的研究出现了很多。
AI绘画Stable Diffusion插件—LayerDiffusion 分层控图新突破！生成透明图片&前后景图片融合，毫无违和感！
A1353192296的博客
08-19 1005
用AI绘画Stable Diffusion 生成透明图片怎么搞？这要搁之前，我们需要生成完图片，然后放到去背景插件中调整参数去除背景！效果一般般如果想要在一张图片上添加主体，该怎么搞？我有个张照片，想要毫无违和感的融合到其它背景图上，怎么搞。这就得用上我们今天说的工具——LayerDiffusion插件了。
AI绘画工具 Stable Diffusion【插画转绘】：建筑 | 风景| 人像照片的插画转绘制作教程，照片秒变插画风格图片！
最新发布
A1353192296的博客
08-22 812
关于Stable Diffusion 的插画转绘，今天给大家分享一种制作方法。我们先看一下效果图。本期教程我们将使用AI绘画工具Stable Diffusion，关于SD的安装和入门使用可以看看我的往期入门教程：[什么是AI绘画工具Stable Diffusion？如何安装使用？最新版秋枼SD4.9整合包保姆级教程建议收藏！] 如需安装包请看下方扫描免费获取哦
AI绘画Stable Diffusion画全身图总是人脸扭曲？ADetailer插件实现一键解决！商业级AI人物生成教程
A13531922962的博客
08-20 948
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
stable diffusion和GAN网络的区别，优点缺点是什么
LIN2020LOVEDA的博客
08-21 774
stable diffusion和GAN网络的区别，优点缺点是什么
【大模型理论篇】大模型时代下Bert去哪啦？
weixin_65514978的博客
08-20 1443
bert、自然语言处理、transformer、encoder、gpt、decoder、nlu、nlg、微调、fine-tuning
天猫商品详情API：深度挖掘商品推荐与关联的新路径
2401_85789772的博客
08-20 751
天猫商品详情API是天猫开放平台提供的一项服务，旨在帮助开发者获取天猫平台上商品的详细信息，包括但不限于商品标题、价格、销量、描述、图片以及推荐与关联商品等。这一接口不仅为购物者提供了丰富的商品信息，也为商家和开发者提供了强大的数据支持，助力其优化商品展示策略，提升用户购物体验。天猫商品详情API为开发者提供了深入挖掘商品推荐与关联信息的新途径。通过合理利用这一接口，开发者可以实现精准的商品推荐与关联展示，提升用户体验和平台运营效率。
零基础学习人工智能—Python—Pytorch学习（六）
kiba518的博客
08-21 839
前言 本文主要讲神经网络的上半部分。 这篇文章开始有很多公式了，这些公式都很简单，但是如果是不经常在脑海里思考公式的人，那可能需要多花点时间做一下自我训练，个人感觉，也就几天时间，就能把自己感觉给调整出来。 习惯了公式看下面内容就会轻松很多，另外如果要深入学习人工智能，熟练的认知公式也是个必须的事情。 另外，我发现我前面文章写的有歧义的地方还是挺多，虽然，已经改了一部分，但，可能还有没发现的，大...
24 优化算法
kaszxc的博客
08-19 544
深度学习模型大多是非凸的所以关于凸优化的很多理论无法使用小批量随机梯度下降是最常用的优化算法冲量对梯度做平滑冲量法是一个简单的稳定优化的算法Adam 对梯度做平滑，且对梯度各个维度值做重新调整通过实践发现，Adam 不一定比冲量法准确率高或者是收敛快，但是整体来讲 Adam 是比较稳定的，Adam 对学习率不那么敏感，使得调参相对来讲会更加容易一点范围之中（进行维度上的调整）分母中的 ε 的作用是保证分母不等于零。
stable diffusion基础原理
07-08
Stable Diffusion是一种基于扩散模型的生成式人工智能技术，它通常用于图像生成领域。其基本原理来源于物理中的分子热运动理论，即物质从高浓度区域向低浓度区域自发地扩散。在这个框架下，它通过学习大量的数据分布，将随机噪声转化为逼真的图像内容。 在算法层面，它通常包括以下几个步骤： 1. **编码器**：接收输入图片并转换成潜在空间中的代码表示。 2. **解码器**：接受这个代码并逐步生成新的图像，每一步都添加一些随机扰动（类似于扩散过程中的分子运动），这使得生成的过程既保持了原有的结构又引入了变化。 3. **训练目标**：模型的目标是在维持原始信息的同时减少随机扰动的影响，使得生成的图片尽可能接近真实世界图片。 稳定扩散的关键在于控制这个扩散过程的速率和噪声的强度，以便既能保留图像的细节又能引入创新元素。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值