让Stable Diffusion成为维也纳最好的画师

于 2024-10-08 10:00:00 发布
阅读量628 收藏 14
点赞数 16
分类专栏： AI绘画 Stable Diffuison应用教程 文章标签： stable diffusion 人工智能 AI作画 AI绘画 模型
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_55154866/article/details/142737082
版权

曾经有一个年轻的画师，想去考维也纳美术学院，他考了四次都被拒。

这个年轻人叫希特勒，后来的事大家都知道了。

这是他当年画的城堡：

img

经常有人说，AI绘图有可能替代电脑绘画的画师。

我个人认为，与其恐慌，不如拥抱。AI绘图可以理解为更高级的PS，真正的优秀的画师可以借助AI提高技术，让画面更有创造力。

对于我们这些业余爱好者来说，让AI助力实现“低端画师”的梦想，就可以了。

大家习惯了用Stable Diffusion画各种各样的美少女，今天给大家一点不一样的风景。

比如，画一幅油画风格的建筑画（咦，怎么和维也纳的年轻人画的差不多？是因为我用了ControlNet插件）：

img

这幅画使用了一个中国小哥做的LoHa，叫：Oboro/朧 Concept (With multires noise version)

不了解LoHa怎么使用的，可以视同lora使用，但是随着越来越多的创作者使用新的技术训练模型，LyCORIS插件还是值得学习并使用的。

作者是这么介绍这个LoHA的（原文是英文，我做了个简单机翻）：

这是一个由100多张图像训练的LoHa模型,这是多分辨率噪声版本。
我使用多分辨率噪声生成强大的绘画笔触。景象显得很朦胧,这就是oboro这个名称的来源。您可以使用LoHa设计田园风光中的场景。
触发器是oboro,笔触会让您惊喜。
权重0.9-1.0在风景和真实人物上会表现更好,您也可以尝试新的使用方式,哈哈。

让我们先试一下田园风光，为了效果更好，选取绘画风格的模型。

1、模型dalcefo_painting_v5

提示词：

RainWorld, (pixel art:1.3), (scenery:1.3), (game screenshot:1.2), outdoors, best quality, (city, overgrown, rain), (((high resolution illustration))),(extremely detailed, hyper detailed), (((intricate details))), , (((high resolution illustration))),(extremely detailed, hyper detailed), (((intricate details))), ((detailed eyes)), highly detailed, ultra detailed, best quality, intricate, hyperrealism, sharp, digital illustration, detailed, realism, intricate, 4k, 8k, trending on artstation, photorealistic, realistic shadows, realistic lighting, raytracing, intricate details, (illustration:1.1), highres, (extremely detailed CG, unity, 8k wallpaper:1.1), cinematic lighting, volumetric lighting, ultra realistic,

![img](https://img-
blog.csdnimg.cn/img_convert/9be4db8380050237e278561efbe02d48.png)

大致意思是，下雨天，城堡。这张照片的效果，只能说一般吧。

下面让我们启用LoHA。

记得增加触发词：oboro

如果没有安装LyCORIS插件，而是当做lora用的，把lyco替换成lora。

出风景图的话，权重0.6-1.0比较好。

oboro,RainWorld, (pixel art:1.3), (scenery:1.3), (game screenshot:1.2), outdoors, best quality, (city, overgrown, rain), (((high resolution illustration))),(extremely detailed, hyper detailed), (((intricate details))), , (((high resolution illustration))),(extremely detailed, hyper detailed), (((intricate details))), ((detailed eyes)), highly detailed, ultra detailed, best quality, intricate, hyperrealism, sharp, digital illustration, detailed, realism, intricate, 4k, 8k, trending on artstation, photorealistic, realistic shadows, realistic lighting, raytracing, intricate details, (illustration:1.1), highres, (extremely detailed CG, unity, 8k wallpaper:1.1), cinematic lighting, volumetric lighting, ultra realistic, <lyco:[LoHa]_Oboro_朧_Concept_(With_multires_noise_version)_LoHa_v1.0:0.9>

img

很有维也纳风格了。

img

2、换一个二次元模型试试

模型：breakdomainrealistic_R2333

提示词：

oboro, outdoors, sky, cloud, grass, scenery, no humans, tree, blue sky, power lines, day, bird, utility pole, house, cloudy sky, window, bare tree, building, solo, plant, animal, sign, traditional media, windmill, door, sketch ,<lyco:[LoHa]_Oboro_朧_Concept_(With_multires_noise_version)_LoHa_v1.0:0.9>

img

比较惊艳，有一点点宫崎骏动画片的感觉了。

3、试一下美少女

模型：meinamix_meinaV10

提示词：

oboro,(( masterpiece, ultra-high quality)),( ultra detailed original illustration),( 1girl, upper body),(( harajuku fashion)),(( flowers with human eyes, flower eyes)), double exposure, fussion of fluid abstract art, glitch,( 2d),( original illustration composition),( fusion of limited color, maximalism artstyle, geometric artstyle, butterflies, junk art),<lyco:[LoHa]_Oboro_朧_Concept_(With_multires_noise_version)_LoHa_v1.0:0.9>

img

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

对于0基础小白入门：

如果你是零基础小白，想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短，学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括：stable diffusion安装包、stable diffusion0基础入门全套PDF，视频学习教程。带你从零基础系统性的学好AI绘画！

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

1.stable diffusion安装包 （全套教程文末领取哈）

随着技术的迭代，目前 Stable Diffusion 已经能够生成非常艺术化的图片了，完全有赶超人类的架势，已经有不少工作被这类服务替代，比如制作一个 logo 图片，画一张虚拟老婆照片，画质堪比相机。

最新 Stable Diffusion 除了有win多个版本，就算说底端的显卡也能玩了哦！此外还带来了Mac版本，仅支持macOS 12.3或更高版本。

在这里插入图片描述

2.stable diffusion视频合集

我们在学习的时候，往往书籍代码难以理解，阅读困难，这时候视频教程教程是就很适合了，生动形象加上案例实战，一步步带你入门stable diffusion，科学有趣才能更方便的学习下去。

在这里插入图片描述

3.stable diffusion模型下载

stable diffusion往往一开始使用时图片等无法达到理想的生成效果，这时则需要通过使用大量训练数据，调整模型的超参数（如学习率、训练轮数、模型大小等），可以使得模型更好地适应数据集，并生成更加真实、准确、高质量的图像。

在这里插入图片描述

4.stable diffusion提示词

提示词是构建由文本到图像模型解释和理解的单词的过程。可以把它理解为你告诉 AI 模型要画什么而需要说的语言，整个SD学习过程中都离不开这本提示词手册。

在这里插入图片描述

5.AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

在这里插入图片描述

实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

程序员王饱饱
关注
专栏目录
stable-diffusion-webui的逐步部署教程
weixin_43178406的博客
01-11 6万+
本文主要介绍了stable-diffusion-webui的逐步部署教程，希望能对使用Stable Diffusion的同学们有所帮助。 文章目录 1. 前言 2. 逐步部署教程 2.1 创建Python环境 2.2 安装依赖库 2.3 运行代码
AI绘画 | stable diffusion简介和原理
洛阳泰山的博客
10-26 4202
随着深度学习技术的不断发展，文本到图像生成已经成为了研究的热点领域。过去几年中，出现了许多文本到图像的生成模型，如GANs、VQ-VAE等。这些模型在生成图像时，通常需要使用大量的数据和计算资源，并且生成的图像质量也参差不齐。因此，开发一种更加稳定、高效且能够生成高质量图像的文本到图像生成模型成为了当务之急。在这个背景下，Stable Diffusion应运而生。该模型由CompVis、Stability AI和LAION的研究人员和工程师共同开发，于2022年发布。
Stable Diffusion 本地部署教程
热门推荐
ellija的博客
03-25 28万+
最近看Stable Diffusion开源了，据说比Disco Diffusion更快，于是从git上拉取了项目尝试本地部署了，记录分享一下过程~这里是官网介绍：https://stability.ai/blog/stable-diffusion-public-release。
万字长文：Stable Diffusion 保姆级教程
略懂……略懂……
03-10 9万+
万字长文，超详细一步一步教你在本地部署运行当下超火的Stable Diffusion模型，生成各种风格图像。
Stable Diffusion教程
木子李
05-22 1781
Stable Diffusion是一种基于GAN模型的AI绘画软件，能够从文本描述中生成详细的图像。
Stable Diffusion详细教程
考研小钻风
06-01 1738
本教程详细介绍了Stable Diffusion的使用方法和步骤，并结合具体示例进行了展示。通过本教程的学习，读者将能够掌握Stable Diffusion的基本操作和应用技巧，并能够根据实际需求生成高质量的图像。希望本教程对读者有所帮助！
Diffusion Model, Stable Diffusion, Stable Diffusion XL 详解
zyw2002的博客
05-27 2047
常见的生成模型有：文生图模型的基本架构如下：衡量图像生成质量的指标基于上述思想，Denoising diffusion 模型包括两个过程：首先，我们先来介绍一下如何破坏数据分布。 如果我们取任何一幅图像（上图a），它具有某种非随机分布。我们不知道这个分布，但我们的目标是破坏它，我们可以通过向其添加噪声来实现。在这个过程的最后，我们应该得到类似于纯噪声的噪声（上图b）。 前向扩散过程的每一步被定义为q(xt∣xt−1)=N(xt,1−βtxt−1,βtI)q(x_t|x_{t-1})= \mathcal{N}
Stable Diffusion之最全详解图解
破损的天堂鸟博客
07-11 1970
Stable Diffusion是一种革命性的图像生成模型，其发布标志着AI图像生成技术的一个重要里程碑。本文将通过详细的图解和实例演示，全面解析Stable Diffusion的工作原理。
Stable Diffusion教程 从入门到精通（下载地址）附安装包+安装文档.txt
07-19
1、Stable Diffusion保姆级安装教程 知识点：如何在goolge云端Colab安装Stable Diffusion以及使用Stable Diffusion的中文语言包汉化.mp4 20、报错修复！关于Stable Diffusion 腾讯云安装部署一键安装脚本近期出现...
Stable-Diffusion-WebUI（秋叶）和Stable-Diffusion–forge
05-10
根据给定的信息，“Stable-Diffusion-WebUI（秋叶）和Stable-Diffusion–forge”似乎是指两个与Stable Diffusion相关的项目或工具。这里将详细解析这两个概念，以便更好地理解它们所涉及的技术知识点。 ### Stable-...
Mac下Stable Diffusion一键安装
06-02
Stable Diffusion 一键安装，国内镜像，无需魔法，Apple Silicon (M1/M2)使用MPS支持GPU，可以根据任何领域的文本输入生成高质量、高分辨率且逼真的图像。 默认选项MAC M1 10秒出图
零基础自建Stable Diffusion绘图教程-AutoDL
07-06
【零基础自建 Stable Diffusion 绘图教程-AutoDL】是一篇面向初学者的教程，旨在指导读者如何在没有专业 IT 知识的情况下搭建一个用于 Stable Diffusion 绘图的环境。Stable Diffusion 是一种人工智能算法，常用于...
Stable Diffusion绘画 | 来训练属于自己的模型：素材准备篇
Leo-Fighting的博客
09-30 622
首先要说明的是，模型训练，需要显卡持续不间断地一致运行，快则0.5-1小时左右，慢的话可能需要跑上几小时，甚至是几天，原因跟显卡的配置和训练设置参数都有关系。模型训练与显卡配置：训练 LoRA模型：要求6GB显存及以上训练 Checkpoint：要求8GB显存及以上训练 SDXL模型：要求16GB显存及以上因此，从显卡配置角度来看，更推荐训练 LoRA模型，而且训练 LoRA模型 比其他的要快上很多。我们利用训练好的 LoRA模型，搭配合适的大模型，也能轻松实现各种定制的风格效果。
Stable Diffusion零基础学习
kat_raja的博客
10-04 452
利用ControlNet在文生图还原整张图的细节，但不保留它的颜色；以下张图片为例。 【还原以下图像的构图，不保留颜色】：需要输入构图信息（深度提取环境层次和线稿提取图像构图），不输入其他色彩信息。
Stable Diffusion绘画 | 如何做到不同动作表情，人物角色保持一致性（下篇）
最新发布
Leo-Fighting的博客
10-07 273
在 人物角色保持一致性（上篇）中，我们已经得到了自己创造的角色的各个角度头像图片：从中选择一个符合自己需求的角度，截图保存，例如下图：进入到「图生图」页面，把上一篇中生成图片的正反向提示词复制过来：在下方加载刚才得到的截图：开启「ADetailer」脸部修复模型：在「ADetailer」加入提示词 ，重绘幅度设置为 ，点击「生成」：得到图片如下：优化调整的方向有2点：在控制表情时，我们需要在权重间找到一个平衡点，过低会不明显，过高则会容易导致人物外貌走样。返回「文生图」页面，保持人物生成的提示词，开启 Co
在Stable Diffusion WebUI中安装SadTalker插件时几种错误提示的处理方法
m0_60659514的博客
10-04 551
比如我在安装SadTalker时，就遇到很多问题，一度放弃了，后来查了一些网上攻略，自己也反复查看日志，终于解决，不吐不快。一、在Stable Diffusion webui中安装SadTalker插件后，重启Stable Diffusion WebUI，在界面中没有出现SadTalker标签。经过修改后，再次启动WebUI，终于能看到SadTalker标签了，选择图像，选择声音文件，调整参数，生成，程序终于欢快地跑起来了。二、插件运行过程中，前端视频生成框中提示Error(错误)，过程中止。
用 LoRA 微调 Stable Diffusion：拆开炼丹炉，动手实现你的第一次 AI 绘画
Hoper-J的博客
10-01 1809
总得拆开炼丹炉看看是什么样的。这篇文章将带你从代码层面一步步实现 AI 文本生成图像（Text-to-Image）中的 LoRA 微调过程，你将： - 了解 **Trigger Words**（触发词）到底是什么，以及它们如何影响生成结果。 - 掌握 LoRA 微调的基本原理。 - 学习数据集的准备与结构，并知道如何根据需求定制自己的数据集。 - 理解 Stable Diffusion 模型的微调步骤。 - 明白在画图界面（UI）下到底发生了什么。 - 使用代码实现 AI 绘画。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值