m0_74942241的博客

使用合理的提示词(Prompt)提示词要简洁明确,避免歧义。important信息前置。添加合适的描述词帮助生成细节。如大小,颜色,质感等。使用正确的英文语法和拼写。避免使用负面和敏感词汇。调整超参数适当调高 Guidance Scale,加强提示词影响力。调整 Steps(迭代次数)不要过少,一般100-200。调试不同的 Sampler,如DDIM较平滑。使用高质量训练数据大型模型效果更好,如Stable Diffusion v2。

今天，我们要聊一聊AI绘画领域里的一个超有趣的话题：为什么Midjourney能用一个5.2模型轻松驾驭各种风格，而Stable Diffusion却需要我们切换无数个模型呢？🧐在Stable Diffusion的里，画一张图可能需要你在真人、二次元、2.5D等模型中做出选择。想要特定风格？那就得再加上lora模型。而为了更优化的效果，我们甚至还要动用ControlNet和VAE模型，这简直就像是无休止的拼图游戏！😵‍💫。

机器学习强基计划聚焦深度和广度，加深对机器学习模型的理解与应用。“深”在详细推导算法模型背后的数学原理；“广”在分析多个机器学习模型：决策树、支持向量机、贝叶斯与马尔科夫决策、强化学习等。话不多说，先看看AI绘画的效果接下来带大家体验一下二次元画师novelAI。最新进展——AI绘画进军三次元，有人用它打造赛博女友？

Stable Diffusion是最近很🔥的一种图像生成方法。基于潜在扩散的机器学习模型，其主要用于根据文本的描述生成详细的图像。该模型由慕尼黑大学的CompVis研究团体开发，是各种生成性人工神经网络之一，由初创公司StabilityAI、CompVis与Runway合作开发，并得到EleutherAI和LAION的支持。Stable Diffusion模型主要由变分自编码器（VAE）、U-Net和一个文本编码器三个部分组成。在前向扩散过程中，高斯噪声被迭代地应用于压缩的潜在表征。

Stable Diffusion 在使用过程中可能会遇到各种各样的错误。以下是一些常见的错误以及可能的解决方案：模型加载错误：可能出现模型文件损坏或缺失的情况。解决方案包括重新下载模型文件，确保文件完整并放置在正确的位置。依赖项错误：Stable Diffusion 需要特定的依赖项才能正常运行。确保已经安装了所有必要的依赖项，并且它们的版本与要求的兼容。系统配置问题：有时系统配置可能会影响 Stable Diffusion 的运行。例如，内存不足、显存不足、权限问题等。

Stable Diffusion 中的提示词通常用于指导用户对生成的图像进行控制。这些提示词可以分为正向提示词（Positive Prompts）和反向提示词（Negative Prompts）两类，它们分别影响图像生成过程中的内容和风格。服饰穿搭: White dress发型发色: Blonde hair (金发), long hair五官特点: Small eyes, big mouth面部表情: Smiling肢体动作: Stretching arms (伸展手臂)

显存才能在本地运行，当然，A 卡也是可以玩起来的，因为绘画对显卡是有着很高的要求的。面部修复，优化面部的，原理是调用一个神经网络模型对面部进行修复，影响面部。每个模型侧重绘画的风格不一样，有些适合画人，...

Stable Diffusion 是一种基于扩散模型（Diffusion Models）的图像生成技术。扩散模型通过逐步添加和去除噪声来训练神经网络，从而生成高质量的图像。这种方法在图像生成任务中表现出色，能够根据输入的文本提示生成符合描述的图像。

AI绘画 | Midjourney 文章目录 如何选择合适的AI绘画工具 个人需求选择 比较工具特点 社区和资源 Midjourney VS Stable Diffusion：深度对比与剖析 使用费用对比 使用便捷性与系统...

6个免费AI绘画网站推荐，AI画画操作简单更好看！触站是一款国内人气很高的画师作品分享平台，有海量插画师入驻，同时触站的AI绘画功能也十分强大。触站的AI绘画功能可以快速产出高质量的绘画作品，并且支持一键下载，让大家可以轻松的获取到自己想要的插画作品。Autodesk SketchBook是一款强大的AI绘画软件，它能够自动检测绘画的轮廓，并自动生成精美的绘画效果，让绘画更加轻松自如。它还支持多种绘画模式，可以自由搭配使用，让绘画更加丰富多彩。它还支持手绘笔触，可以模拟真实的绘画效果，让绘画更加自然真实。

Stable Diffusion大家已经很熟悉了，那么如何训练自己的sd模型呢，今天我就介绍一下用LoRA训练sd的方法。手把手教你在linux中部署stable-diffusion-webui如何训练一个大模型：LoRA篇我们以Chilloutmix为例，Chilloutmix可以生成好看的小姐姐。为了实验LoRA的能力，我们用小哥哥的图片对它进行微调，看效果如何。

现在有很多开源的大模型，他们一般都是通用的，这就意味着这些开源大模型在特定任务上可能力不从心。为了适应我们的下游任务，就需要对预训练模型进行微调。在新的数据集上训练，会破坏大模型原来的能力，使其泛化能力急剧下降；而且现在的模型参数动辄几十亿上百亿，要执行全参数微调的话，他贵啊！！于是LoRA出现了， LoRA（Low-Rank Adaptation)是微软提出的一种参数有效的微调方法，可以降低微调占用的显存以及更轻量化的迁移。同时解决了上述两个问题，那它凭什么这么厉害？往下看吧。

今天我们要介绍的是时下最流行的AI绘图软件Stable Diffusion，虽然Diffusion.ai已经开放api，但是长时间的商业化调用我们需要购买很多的金币。所以我们需要找一个平替的AI绘图平台，现在主流市场中AI绘图软件主要就是OpenAI的DALLE、midjourney以及今天要学习的Stable Diffusion，而前两者是在商业使用中只能通过api调用也是需要花费很多金钱，那今天我带大家使用Stable Diffusion搭建一个属于自己的开放AI绘图软件。

终于实现 Stable Diffusion 自由了！Mac 本地部署 Stable Diffusion，坑之多，但都已帮大家填平了！想在 Mac 上部署 Stable Diffusion 的同学，拿着这份保姆级教程，直接冲就完事！已将部署过程中踩过的坑一一记录了...

Stable Diffusion 是当前最火热的图像生成模型之一，目前已经广泛应用于艺术创作、游戏开发、设计模拟等领域，因其开源生态和易于使用而受到创作者的广泛关注，相比 Midjourney 而言，其最大的优势是完全免费，且拥有庞大的社区资源。如果需要本地部署 Stable Diffusion，首选 Stable Diffusion Webui。不过本地部署对设备硬件要求还是比较高的，通常需要至少 4G 显存，有关如何在 Windows 上使用，社区已经有了非常不错的一键启动脚本。

最近在玩文生图时发现一个好玩的插件，今天给大家演示一个好玩的技术，数字克隆人，仅需一段视频，一段录音即可生成指定的数字人播报，还能换脸，哈哈厉害啦，闲话不多说，开干哈哈，不错吧，这可以仅仅一张照片的效果，照片是fooocus生成的，如果还没用过，可以先看这篇我这个视频的生成，使用了这莫几个工具，1、文本大模型chatgpt，写文案，2、剪影配音将1的文本转成语音，其实是视频，但是你完全可以当语音用，3、fooocus生成一张人物正面照，4、合成数字人工具包SadTalker。

Fooocus是一款图像生成软件（基于Gradio）。Fooocus是对Stable Diffusion和Midtravel设计的重新思考：从Stable Diffusion学习，该软件是离线的，开源的，免费的。从Midtravel中学到，不需要手动调整，用户只需要专注于提示和图像。Fooocus包含并自动化了许多内部优化和质量改进。用户可以忘记所有这些困难的技术参数，只需享受人与计算机之间的互动，“探索新的思维媒介，扩展人类的想象力”[1]。Fooocus简化了安装。

在数字艺术创作和图像处理中，我们经常会遇到需要放大图片的情况。无论是为了打印、展示还是仅仅为了提高图像质量，放大图像的同时保持或增强细节是一个挑战。幸运的是，ComfyUI提供了多种方法来实现图片的放大和细节修复。前几节课我们学习了文生图、图生图、局部重绘，但是生成的图片分辨率太小，我们可以通过模型放大、潜在放大、非潜在放大、分块放大多种方式对图像进行放大。本文将详细介绍如何在ComfyUI中使用这些方法，帮助你获得高质量的放大图像。在ComfyUI中，有多种方法可以实现图片的放大和细节修复。

大家好！今天我来介绍一款令人惊叹的开源软件——Stable Diffusion。这是一款基于AI技术的图片生成软件，可以让用户轻松随心所欲地创建出各种令人惊叹的图片。在这里插入图片描述Stable Diffusion拥有强大的AI算法，不管是风景、人物、动物等各种场景，它都能够准确地模拟出真实的效果。不仅如此，它的生成速度也非常快，让你在短时间内就能够欣赏到惊艳的图片。更重要的是，Stable Diffusion是一款完全开源的软件，可以透明地让用户了解算法原理和代码实现，保证了软件的公平性和可信度。

Stable Diffusion AI 绘画从提示词到模型出图》介绍了 Stable Diffusion AI 绘画工具及其使用技巧。书中内容分为两部分：“基础操作篇”，讲解了 SD 文生图、图生图、提示词、模型、ControlNet 插件等核心技术的应用，帮助读者快速从新手成长为 SD 制图高手；“案例实战篇”，精选了动漫人物、水墨画、AI 摄影、商业海报、电商模特、产品包装、电影角色等大量 AI 绘画案例，并带有详细的同步教学视频，读者可以边学边做，提高学习效率。

在文生成图领域，Midjourney可以被视为一种玩具，而Stable Diffusion则以其稳定、可控和高效的能力而闻名，一直被认为是最接近实用工具的文生成图模型之一。Stability AI发布了Stable Diffusion 3，宣称这是他们最强大的文本到图像模型之一。该模型利用扩散转换器架构，显著提高了多主题提示、图像质量和拼写能力的性能。

AnimateDiff采用控制模块来影响Stable Diffusion模型，通过大量短视频剪辑的训练，它能够调整图像生成过程，生成一系列与训练视频剪辑相似的图像。简言之，AnimateDiff通过训练大量短视频来优化图像之间的过渡，确保视频帧的流畅性。与传统的SD模型训练方式不同，AnimateDiff通过大量短视频的训练来提高图像之间的连续性，使得生成的每一张图像都能经过AnimateDiff微调，最终拼接成高质量短视频。

最近文生图领域最重要的消息，就是Stable Diffusion 3的推出。目前，有两种使用Stable Diffusion 3的方法，一种是通过API调用，这需要在Stability AI开发者平台申请API Keys：Stability AI开发者平台在Google Colab上调用API进行绘图另一种方法，是使用Stable Assistant聊天机器人（需申请），类似在ChatGPT里使用DALLE3：通过Stable Assistant使用SD3。

Stable Diffusion WebUI 的绘画插件 Controlnet 最近更新了 V1.1 版本，发布了 14 个优化模型，并新增了多个预处理器，让它的功能比之前更加好用了，最近几天又连续更新了 3 个新 Reference 预处理器，可以直接根据图像生产风格类似的变体。使用 Reference only 预处理器生成一张图片的多个变体。

不知道更新了controlnet 1.1.4的大家有没有关注到多了几个算法，最后一个就是IP Adapter。IP Adapter是腾讯lab发布的一个新的Stable Diffusion适配器，它的作用是将你输入的图像作为图像提示词，本质上就像MJ的垫图。之前不是也有一个reference吗，到底有什么区别？IP Adapter比reference的效果要好，而且会快很多，适配于各种stable diffusion模型，还能和controlnet一起用。

ip-adapter是腾讯Ai工作室发布的一个controlnet模型，可以通过stable diffusion的webui使用，这个新的功能简单来说，他可以识别参考图的艺术风格和内容，然后生成相似的作品，并且还可以搭配其他控制器使用。可以说SD已经学会临摹大师的绘画并且运用到自己的作品上了。

ComfyUI宣布支持Stable Diffusion 3.5！这是AI艺术创作领域的又一次重大升级，让用户可以在本地推理下体验全新的生成能力。借助ComfyUI基于节点的工作流程，用户将能够以更加灵活和高效的方式创作令人惊叹的视觉作品。Stability AI刚刚发布了Stable Diffusion 3.5，这一版本包含了三种强大的模型，每种模型都针对不同需求进行了优化：所有这些模型都可以在Stability AI社区许可下免费用于商业和非商业用途，极大地降低了创作者进入AI图像生成领域的门槛。随着St

AI绘画开源王者归来，Stable Diffusion 3.5 AI绘画模型开源发布

今天就来给同学们介绍一下comfyui，ComfyUI 是一款全新的 WebUI，它可以让您使用图形/节点/流程图的界面设计和执行高级稳定扩散管道，无需编写任何代码。它支持多种稳定扩散模型和功能模块，可以实现工作流的精准定制和可靠复现，同时提供图像生成的实时预览和比较功能。

Stable Diffusion 堪称一款具有革命性的 AI 绘画生成工具，它借助潜在空间扩散模型，把图像生成的过程转变为逐步去噪的 “扩散” 流程。和传统在高维图像空间进行操作不一样，Stable Diffusion 先是将图像压缩至低维的潜在空间，接着运用扩散过程来创造新的图像。这种先进的技术不但能够依据文本描述生成细致逼真的图像，还能用于图像的修复、绘制，以及实现文本到图像和图像到图像的转换。文本到图像生成：用户仅需提供文字描述，Stable Diffusion 就能生成逼真的图像。

之前介绍了 SD 中的一款换脸插件 ReActor，虽然好使，但是安装还是有些许麻烦的。今天给小伙伴们介绍一款新型的换脸插件：Instant ID，主要是使用 ControlNet 和 IP-Adapter 的组合来控制中的面部特征。一句话，安装简单又好使。Instant ID 同时支持 WebUI 和 ComfyUI。我们先来介绍 Instant ID 在 SD WebUI 中的使用，好久没分享 WebUI 了哈！

我认识一个宝妈通过AI绘画：新号2周就变现四位数，几张AI绘画的图片就能挣钱，下面这几个玩法90%得的人都不知道！！！在抖音、小红书上，壁纸号火的一塌糊涂，直接把壁纸生成关键词投喂给AI，它就能出精美的高清壁纸，然后发布到抖音，小红书获取流量变现。爆一条视频，轻松变现3位数，只要视频还在，就可持续开单操作方法：用AI软件将制作好的壁纸、头像、表情包、背景图等素材上传到平台创作图库，然后在短视频平台发布相关作品引导粉丝下载。用户在下载时会观看广告或者充值会员，这时候我们就能获得广告或者会员收益。

所谓图片的创成式填充，就是基于原有图片进行扩展或延展，在保证图片合理性的同时实现与原图片的高度契合。是目前图像处理中常见应用之一。这项技术已成为当前图像处理领域的热门应用。过往，此类操作多依赖于Photoshop等专业软件完成。现在，让我们一同探索在Stable Diffusion模型下，如何高效实现这一创意过程。原图片：512*512横向扩展：1024*512纵向扩展：512*1024在图生图功能界面，上传一张图片，我这里上传一张500*500大小的图片。

这一步骤会下载一些常用模型，如果遇到下载失败，根据报错提示在huggingface.co下载模型放到对应目录，如下载stable-diffusion-v1-5模型，搜索找到https://huggingface.co/runwayml/stable-diffusion-v1-5/tree/main。随着技术的迭代，目前 Stable Diffusion 已经能够生成非常艺术化的图片了，完全有赶超人类的架势，已经有不少工作被这类服务替代，比如制作一个 logo 图片，画一张虚拟老婆照片，画质堪比相机。

AIGC最近非常火爆，其中AI绘画已经在很多商业领域上有不错的应用了，例如：AI模特、AI广告、AI建筑设计、AI室内设计等等。目前Stable Diffusion是AI绘画领域的一个非常不错的软件，关键是完全免费的。今天送给大家一个傻瓜式的安装工具包，并附带超详细的学习教程，学完你能到精通级别，可以放心去接单了。1、下载安装包（看最后）：2、先安装“启动器运行依赖项”，再解压缩“sd-webui-aki-v4.1.zip”文件到你需要的目录下，最好不要用中文目录3、双击执行“A启动器.exe”

我们在用 Stable Diffusion 制作AI图片时，为了得到真人照片级别的图片，通常会选择 Chilloutmix 做为大模型，这是一个非常流行的真人照片级的大模型。为了得到更加倾向东亚人审美的真人小姐姐照片，我们还会选择一个 lora 模型，这次我们以这个名叫 HongKongDollLikeness 的lora模型为例，自己动手做一个AI图片。

今天我又要来用 stable diffusion 来搞事情了。只用一个非常巧妙的设置，就可以让照片实现非常完美的光效，感觉那效果都有些逆天了，还不学起来！先来看几张生成的样图，这光线，这质感，是不是非常nice？这是不是就是你想要的效果？

今天给大家介绍 StableDiffusion中ControlNet 的两个用法，其中一个是Shuffle（随机洗牌），另一个是 Reference（参考），其中 Reference 还能起到固定角色的功能，无限生成统一风格的角色图片。找到ControlNet，勾选启用、完美像素，Shuffle（随机洗牌），从网上找到一张比较有特色的图片扔给ControlNet。

关于SD3的优势就不再赘述了，这里主要说说普通用户如何在本地进行部署。但是下载模型需要先登录Hugging Face账户，并签署一份许可协议签署完毕之后就可以看到整个项目的文件列表了上面的文件大致可以分为三部分：这部分主要是三份Comfyui的工作流文件，下面会用到。

今天给大家分享是的如果利用Stable Diffusion给人物换脸！今天给大家推荐一款插件，不用训练loar也能给人物进行换脸！我们都知道日常换脸，需要的技术难度大，而且普通技术换脸的效果往往不够自然，尤其是在表情和面部细节的处理上。容易产生不真实感和违和感，光影融合度较差，而且找人处理还要费比较高的成本！周期长今天给大家推荐的这款插件学习成本低，而且换脸效率高只要光影不是特别复杂，日常的需求是够的！