libaiup的博客

本教程详细介绍了Stable Diffusion的使用方法和步骤，并结合具体示例进行了展示。通过本教程的学习，读者将能够掌握Stable Diffusion的基本操作和应用技巧，并能够根据实际需求生成高质量的图像。希望本教程对读者有所帮助！

AutoDL部署AI绘图大模型Stable Diffusion使用详解

全新的时代，AIGC（Artificial Intelligence Generative Content，即人工智能生成内容）正在重新塑造着内容创作生态。当常识能被机器识别，当艺术被重新定义，当创意不再需要人工，广告营销行业将迎来一场生产变革巨浪。数英将持续聚焦AIGC领域，通过资讯分享、认知科普、方法总结、深度访谈等，带领大家多方位了解AIGC。本期内容，我们将梳理22个AI基础概念，带你搞清楚。

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工

2022年作为AIGC（Artificial Intelligence Generated Content）时代的元年，各个领域的AIGC技术都有一个迅猛的发展，给工业界、学术界、投资界甚至竞赛界都注入了新的“AI活力”与“AI势能”。其中在AI绘画领域，Stable Diffusion当仁不让地成为了开源社区中持续繁荣的AI绘画核心模型，并且快速破圈，让AIGC的ToC可能性比肩移动互联网时代的产品，每个人都能感受到AI带来的力量与影响。

在当今数字化时代，人工智能技术正在以前所未有的速度和规模改变着各行各业的工作方式和流程。而室内设计领域中，AI技术也正在迅速崛起，为设计师们带来了前所未有的便利和创作可能性，大量的设计师已经开始结合AI进行设计，甚至是平、立面图以及效果图的绘制。在当下流行的 AI 绘画工具中，Midjourney 和 Stable Diffusion 是风头最盛的两个工具，它们在产品策略上各有长处。

本文给大家分享 Stable Diffusion 的基础能力：ControlNet 之图片提示。这篇故事的主角是 IP-Adapter，它的全称是 Text Compatible Image Prompt Adapter for Text-to-Image Diffusion Models，翻译成中文就是：用于文本到图像扩散模型的文本兼容图像提示适配器，名字很长很拗口，我们只要记住四个字就行了：图像提示，如果还觉得长，那就两个字：垫图。记不住也没关系，下面我会带大家一步步体会它的图片生成能力。

今天给大家分享，利用Stable Diffusion（以下简称SD）的垫图功能，实现真人照片风格转换。虽然SD用起来没有midjourney体验好，但是软件免费，而且可控性好，因此就选它了。01工具准备准备好SD webui工具，contronet版本要在V1.140以上，也可以直接升级到最新版本V1.440。contronet等插件升级，依次点击SDwebui界面上的扩展，已安装，检查更新，出现升级检查进度条，然后勾选最新版本，如下图。

在这段时间里想了很久最终决定—一只清后续主要进行的更新（以下简称“SD”）一方面SD是目前AI绘画主流之一，另一方面是SD相对于MJ可控性比较高，在商用层面上使用较多——当然，还有就是有很多伙伴会向我询问SD的内容。SD具有很强的灵活性。无论是动漫风格、写实风格还是幻想风格的线稿，SD 都能根据需求进行上色。它可以根据不同的指令调整色彩的风格、色调、饱和度等参数，以适应各种创作目的，无论是用于商业插画、个人作品还是概念设计等，都能发挥出色的效果。

用ComfyUI 将人物视频 转换 动漫风格

ComfyUI+AnimateDiff 丝滑动画 随心制作

SD 是一款功能强大且备受欢迎的软件/工具，它具有的以下功能和优势，能够为您的工作、学习和娱乐带来极大的便利。

做为AI绘画的主流工具之一，Stable Diffusion（简称SD）大部分人都不陌生，用的最多的可能就是秋葉大佬的一键启动整合包。它以资源整合、安装方便、界面友好，自动更新、完全免费，深受广大AI绘画爱好者的欢迎前两天秋葉大佬更新了2024最新的4.9版本一键整合包，修复了一些BUG,更新了一些插件，以支持最新的SD3模型，今天我们就来介绍一下4.9版本的安装和设置。

今天直接给大家上干货，安装包链接在最后！！！1.打开链接，可以看到这里边为大家提供了四个版本，N卡和A卡版本是为使用windows系统的朋友提供的。可以根据你的显卡型号选择下载。2.N卡高端显卡附带秋叶大佬启动器，(里面附带启动器安装教程)这个版本是我们优先为大家推荐的，而且这个文件夹里还分为两个安装整合包我们先来来看秋叶大佬4.9原版的安装整合包。

最近我一直在研究AI写真技术，前两篇文章介绍了使用 ControlNet-InstantID和 IPAdapter-FaceId生成真实人脸的技术，它们分别适用于SDXL和SD15，原理都是提取人物的面部特征，然后在生成图片时使用这些面部特征，从而实现特定人物的照片生成。本文将继续分享另一种常见的AI写真技术：换脸大法，所谓换脸就是将照片中人物的面部特征更换为特定人物的面部信息。如果我们已经有了一些模版图片，不想或者不能再拍摄或者生成，使用换脸大法是个不错的选择。本文使用的工具是 ReActor，

这期我们来继续聊聊另一款——Stable Diffusion。这项技术属于开源项目，更新快，安装免费，玩法多，也是目前AIGC用到的主要技术。具体的安装步骤这里就不讲了，网上资源很多，大家自行搜索，今天主要讲讲它的基础玩法以及商业变现的一些思路。文章稍长，大家可按需跳跃式阅读。这个比较简单，就是在tex2img这个选项卡这里，输入正反提示词，设置参数，点击Generate按钮后就能得到图片，下图是Stable Diffusion的生图界面。这里重点提示一下如何通过某几个参数的设置得到画质清晰的图片。

最近网上的小和尚火了，大家发现了吧？其实这就是一个数字人，下面我们就手把手教大家如何进行数字人制作及CPS卖货，目前是个超级蓝海，大家赶紧学习起来，做属于自己的数字人吧！今天就是带大家一起制作这种美女数字人视频。**大家应该都刷到过一个视频：一个 AI 数字人美女，用温柔的声音（英文）讲述认知、思维、教育、情感等领域的知识。**这个账号在短短 3 个月内，就涨粉了 46 万。这个账号的成功，引起了不少人的关注。有人认为，AI 数字人具有人格化的特征，能够与用户建立情感连接，从而提高用户的粘性。

人有冲天之志，非运不能自通。2024年普通人能接触到的「运」就是AI。这点我深有体会，我累死累活学了3 年自媒体，涨了10万粉。现在还不如刚学会AI的00后小孩赚的多。我认识一00后小朋友，学了一个月AI，这个月赚了4500普通宠物写真已经不能满足00后铲屎官了现在流行主人+宠物的合照收费300元一张，这个赛道意外的受欢迎，朋友说，有的小红书博主，已经达到月入5.5W，客户都是漂亮多金的小姐姐。只需要你将照片上传，再输入专门的咒语即可。

我愿称之为AI届的赛博菩萨！而且人都开源了，好不好用我还能不知道嘛？目录为啥选择MJ和SD？SD的基本介绍、体验和技巧文末附和，需要的友友文末自取就ok～也不是不能用，但就是差亿点意思，你把同一个毛坯图给国内模型和SD完全两个效果。但你投给SD出来的是这样的：SD不仅如此，SD用来给线稿上色也有一手，像这种古风插画图色，以前搞半天现在1分钟搞定，主要还经得住细看。SD-线稿上色当然除了Stable DIffusion，

ControlNet是一种能够嵌入任意训练好的扩散模型，并为这些扩散模型提供更多控制条件的神经网络结构。ControlNet的基本结构如图ControlNe的基本结构由一个对应的原先网络的神经网络模块和两个“零卷积”层组成。在之后的训练过程汇总，会“锁死”原先网络的权重，只更新ControlNet基本结构中的网络“副本”和零卷积层的权重。这些“副本”将学会如何让模型按照新的控制条件来生成结果，而被“锁死”的网络则会保留原先网络已经学会的所有知识。

一个刚学AI绘画的小菜鸟怎么快速成为Stable Diffusionde的高手？答案就是SD插件，只要学会使用SD的各种插件，帮你写正向和负向提示词，修复人脸/身体/手指，高清放大图片，指定人物pose，图片微调等等都可以轻松搞定，善用插件是成为高手必经之路。

一年不到，AI对生活和工作的影响已经逐步体现。所以千万别掉队了，也许 AI 不能成为我们的主要工作，但是如何借助 AI 实现副业的扩展同样值得思考。这一篇就来讲一个 AI 绘画工具，这个工具我也是才上手不久，所以我把这其中的一些笔记分享出来，希望大家都能融入到这个新的时代。stable diffusion 本质上是一个 AI 绘图生成工具，我想大家肯定听说过它的竞品 ：Midjourney。

这次我们要用 stable diffusion 实操一下，教你一步一步生成让你心动的小姐姐。首先，我们要打开启动器。在出现“To create a public link, setshare=Trueinlaunch().”的提示后，在浏览器键入“http://127.0.0.1:7860/”，打开 stable diffusion 的工作界面。启动器打开后最小化就可以了，不用去管它，但不能关闭。

现在比较火的AI绘图软件有Midjourney 和 Stable Diffusion，Midjourney目前只能通过 Discord 机器人使用，需要通过 Discord 将其添加至服务器中使用，在使用时，输入斜杠"/"可以看到可用的命令，再通过选择/imagine”输入可用的提示词（prompt），最后由服务器生成图片。另外，使用 Midjourney 需要付费。

ai绘画软件stable diffusion 配合 ControlNet后几乎无所不能，今天我们来挑战用 stable diffsuion 制作角色设定图。我们要借助 ControlNet中OpenPose来生成人物四视图，首先我们需要一张人物四视图的骨骼图，这种骨骼图很多（如下图），如果自己找不到，下面的图可以下载下来直接使用。

玩stable diffusion，就一定要会玩ControlNet，它是stable diffusion一个非常重要的扩展插件，它不仅可以用来复制构图和人体姿势，还有其他很多强大的功能，要使用ControlNet，就必须先要学会怎么安装它。现在 ControlNet 已经升级到了1.1版本，今天告诉大家4种安装ControlNet的安装方法。在介绍安装方法前，先给大家介绍它的官网、插件下载网页和模型下载网页，首先是官网（见下图），下图中红色部分是网址，大家有兴趣可以自己去看看。

朋友们好，今天分享的是Stable diffusion的SDXL模型以及相关实操。前面其实我已经断断续续地介绍过几次Stable diffusion的模型，比如 1.X 和 2.X 模型，但其实在2.X 和 SD3 之间，大概在2023年7月份左右，StableAI 还发布过一个SDXL大模型，也就是今天要分享的主题。与之前的SD1.5大模型不同，这次的SDXL在架构上采用了“两步走”的生图方式：以往SD1.5大模型，生成步骤为 Prompt → Base → Image，比较简单直接；

今天给大家推荐一款超真人SD1.5的亚洲人像大模型，这款大模型在人像的表现力相当不俗！真实感极强而且1.4版本的模型比1.3版本的模型在增加细节的基础上还增加了旗袍汉服等元素，更加综合，强烈推荐！而且这款模型在C站的下载量是非常高的！很多人都在用。1.人像的真实感得到了极大的提升，增加了旗袍、汉服等东方元素，更好的棚拍效果及户外效果2.在人物特写的情况下修复了崩坏的情况可更改人物年龄，比较稳定的输出效果是10-80岁；

我们都知道想要把画好的插图转成3D之前的时间成本很高，还要学习专业的三维软件，以及用Midjourney生成的插图也想转成3D的但是Midjourney并不能完美解决这个问题，今天我给大家带来用Midjourney生成的插图，然后再Stable Diffusion转成3D的第一步：想好自己要生成的人物风格插图，打开Midjourney输入指令，生出自己想要的插图效果！第二步：打开Stable Diffusion 选择图生图，选择主模型: revAnimated vl1.safetensors ，

这个项目虽然投入了近乎工作外的全部精力，但是带来的意义是非凡的。通过这个项目，我实现了AI变现的从1到10。有了变现之后，跟一直实践却离变现很遥远的状态，完全是两种心境。后面虽然不主要做AI绘画了，但也会成为我的一个爱好，也乐意帮朋友偶尔解决下相关问题、做做分享。不过我的绝大部分精力将会在自己选择的垂直领域（AI prompt + 职场赋能培训、精力管理）上深耕，力争持续为大家分享有价值的内容。

本文使用软件为Bilibili社区核心贡献者秋叶大佬发布的整合包，跳过了绝大多数对网络、Python的前置知识要求。这让完全没有编程知识的人也能够从0开始学习使用Stable Diffusion，并且在几乎0调整的前提下就可以享受最新最核心的技术。可以说，从这一天开始，AI绘画，尤其是SD的普及，又得到了更进一步的推动。本文将基于最新的秋叶整合包，结合笔者整合的资源，为大家介绍最基础的概念和安装方式。

使用 Openpose 控制稳定扩散。模型文件：control_v11p_sd15_openpose.pth配置文件：control_v11p_sd15_openpose.yaml然而，官网觉得提供所有这些组合太复杂了。但是，笔者不这么认为。当你看到本教程时已经进阶了，实测每种模型都有它的应用场景。

Stable Diffusion可以说是目前最受欢迎开源文生图模型。SD是建立在latent diffusion架构基础上，相比pixel diffusion架构，latent diffusion采用一个autoencoder模型来将图像压缩为一个更小的latent，这样就可以大大降低diffusion model所需的计算量，只需要一个扩散模型就可以生成512x512以上的图像。目前SD已经发布了三个版本：SD 1.x、SD 2.x和SDXL。

真人换装是图生图的一个典型应用。在图生图中可以通过局部重绘和涂鸦重绘两种方式实现，2种实现方式都差不多，不同的在于涂鸦重绘可以指定衣服的颜色。我们先看一下模特换装的实现效果。原图片只改变模特的上衣或者裤子。改变整个模特的服装。下面我们来详细看一下图生图实现模特换装的具体实现方式。这里以图生图的局部重绘为例来进行说明。在图生图功能菜单界面，我们选择【局部重绘】上传一张我们需要模特照片。

今天，我将为大家带来一系列由SD制作的令人叹为观止的AI绘画作品。在这个系列中，我们将重点介绍一幅杰作，一位身着粉红色长制服的护士形象。这幅作品以其详细的背景，逼真的描绘和官方美术水准脱颖而出。让我们一起欣赏这个令人难以置信的艺术创作，感受其中的细节之美和艺术的魅力。这幅AI绘画作品展现了一个令人心动的护士形象，她穿着粉红色的长制服，戴着护士帽，长发披肩，绿色的眼睛透露出一丝神秘感，直刘海则增添了她的俏丽气质。她的外表诱人动人，配饰如项链、手镯和黄色发光的耳环更是点亮了整体形象。

四大顶流AI绘图模型真实评测 - Midjourney、Adobe、SD、DALLE

StableDiffusion的图生图功能，是其核心卖点之一。对于图像的精细修改控制能力，远远强于Midjourney，更适合专业化设计。的功能，非常适用于在现有图像上进行，将设计效果调整到更加精细化的层次。

你是不是看着正向提示词（Prompt）和反向提示词（Negative Prompt）这两行空空的输入框感到无从下手？你是不是看到满是英文的提示词就头疼？你是不是因为不能很好地写出英文的提示词（Prompt、Tag）而想要放弃？首先stable diffusion提供了一种保存提示词模板的方法。如下图所示，当我们写好一组提示词想保存下来的时候，可以点击最右边保存图标，然后弹出窗口，填写好style name，点击确定保存，即可把模板保存下来。

又是一个神器，小伙伴们搬好小板凳，准备好我要开始了。我们知道，在很多模型和lora使用的时候，是需要填写触发词的。比如这个盲盒lora，提示词就是“full body, chibi”，需要把这些触发词放到正向提示词里面才能达到想要的效果。举个例子，当我们只引用lora，而不填入触发词的时候是这样的。当我们填入特定的触发词之后，就达到了这个lora该有的效果。所以，有的时候你的成图效果不理想，有可能是因为你没有填写模型或lora的触发词。

日本人做的Stable diffusion提示词插件，又双叒升级了… …最新版的升级日期是2023年5月20日。我还能怎么办？只好乖乖的升级，然后重新汉化。不过，这次汉化之余，除了那3000+提示词外，我又加了点私货：大人模式。什么是大人模式？看图，不多解释了。这个模式搜集了162个提示词，这方面的知识面严重不足，很多单词不认识，只好一个个百度去查… …可能有些翻译不是很到位，大家可以直接打开yml文件查看英文单词进行修改。