[AI] Stable Diffusion 提示词手册

英文原文:https://cdn.openart.ai/assets/Stable%20Diffusion%20Prompt%20Book%20From%20OpenArt%2011-13.pdf

从以下位置获取最新版本:https://openart.ai/promptbook.

Brought by : OpenArt

作者:Mohamad Diab (PublicPrompts)
Julian Herrera
Musical Sleep
Bob Chernow
Coco Mao

最后更新: 10/28/2022

Stable Diffusion 简介

Stable Diffusion 是一种开源文本到图像人工智能模型,可以在几秒钟内从给定文本生成令人惊叹的图像。

该模型在 LAION-5B 数据集中的图像上进行训练。 它由 CompVis、Stability AI 和 RunwayML 开发。 Stability AI 的所有研究成果都旨在开源。

这本提示书由 OpenArt 为您提供,OpenArt 是一个致力于 AI 原生内容的平台和社区,由社区成员编写。 如果您有任何疑虑或疑问。 您可以通过我们的 Discord 服务器联系我们。

1. OpenArt 简介

OpenArt (https://openart.ai) 是一个人工智能原生内容和社交平台。

它有很多很棒的功能可以帮助您编写更好的提示

  • 发现数百万张人工智能生成的图像和提示
  • 按图片内容搜索
  • 建立您的人工智能艺术作品集并在我们的社区上展示您的作品
  • 免费使用Stable Diffusion和 DALL-E 2 创建(以及更多模型即将推出)
  • 参加我们的人工智能艺术挑战赛,赢取奖励

提示词工程

介绍

提示词工程是构建可由文本到图像模型解释和理解的单词的过程。 将其视为您需要说的语言,以便告诉人工智能模型要画什么。

提示词工程是突破 Txt2IMG 模型局限性的好方法。 好的提示可以让图像从优秀走向卓越。

这本提示词手册将帮助您学习基本的构建模块和掌握Stable Diffusion的所有技术。

生成好图像的秘诀:

  • 写得好的提示由修饰语和良好的句子结构组成。 我们将在第 2 节中介绍提示词格式。我们还将向您展示在第 3 节中可以使用的所有类型的修饰符以及第 4 节中的一些魔术词。
  • 调整良好的 Stable Diffusion 参数。 (第 5 节)。 您始终可以使用默认值,但有时微调参数可以产生更好的结果。 这将增强您将创意梦想图像变为现实的能力。

提示 - 您可以随时访问 OpenArt,从数百万条提示中获取灵感。

这是提示和所有参数的示例提示:
Funko pop superman figurine, made of
plastic, product studio shot, on a white background, diffused lighting, centered.
(Funko pop 超人雕像,由塑料制成,产品工作室拍摄,白色背景,漫射照明,居中。)

在这里插入图片描述
Model: Stable Diffusion
Seed: 70455
Scale: 13
Steps: 25
Resolution: 512 x 512
Sampler: DDIM

在 OpenArt 上尝试此提示

2 提示词格式

在这里插入图片描述
首先提出一系列问题

  1. 你想要一张照片(photo)还是一幅画(painting)?
  2. 照片的主题是什么? 人? 是动物还是风景?
  3. 您想添加哪些细节?
    • 特殊照明。 柔光、环境光、环形光、霓虹灯
    • 环境。 室内、室外、水下、太空
    • 配色方案。 充满活力、黑暗、柔和
    • 观点看法。 正面、头顶、侧面
    • 背景。 纯色、星云、森林
  4. 以特定的艺术风格? 3D渲染,吉卜力工作室,电影海报
  5. 特定的照片类型? 微距、长焦

这不是一个包罗万象的列表,但将帮助您在开始快速制作之旅时获得出色的结果。 不要害怕尝试,尝试不同的提示越多,你就会变得越好!

在这里插入图片描述
现实生活中的 Shaggy Rogers 照片,电影灯光,从货车窗户往外看,鲜艳的色彩,散景,电影海报风格

例子:

回答下列问题

  1. 你想要一张照片还是一幅画? => 绘画
  2. 照片的主题是什么? 人。 动物, 风景. => 一只金毛
  3. 您想添加哪些详细信息? => 穿西装
    a. 特殊照明。 柔和的环境光、环形光、霓虹灯 => 自然光
    b. 环境。 室内、室外、水下、太空 => 天空
    c. 配色方案。 充满活力、黑暗、柔和 => 颜色鲜艳
  4. 具体的艺术风格? 3D 渲染,Ghibli工作室,电影海报 => Ghibli工作室

一幅可爱的金毛穿着西装,自然光,在天空中,色彩鲜艳,Ghibli工作室的画作

在这里插入图片描述
然而,有一个问题。 金毛不在天空中……人工智能没有正确理解“在天空中”。

不用担心! 如果其中一个部分很重要,您可以稍微更改单词的顺序。 单词在句子中越靠前,就越重要。

在这里插入图片描述
A painting of a cute goldendoodle in the sky, wearing a suit, natural light, with bright colors, by Studio Ghibli

天空中一只可爱的金毛,穿着西装,自然光,色彩鲜艳,吉卜力工作室的画作

我们在提示的前面“在天空中”移动了。 正如你所看到的,狗现在“在天上”。

单词的顺序很重要

我们所需输出的顺序和表示方式几乎与词汇本身一样重要。 建议明确且单独地列出您的概念,而不是试图将其压缩为一个简单的句子。

在这里插入图片描述

3 修饰符

在这里插入图片描述
小可爱的鸭子弹吉他玩具,站立角色,柔和光滑的灯光,柔和的色彩,skottie young,3d 搅拌机渲染,多计数,模块化建构主义,流行超现实主义,基于物理的渲染,方形图像

关于修饰符

修饰符是可以改变图像的风格、格式或视角的单词。 事实证明,某些神奇的单词或短语可以提高图像质量。

在本节中,我们将讨论您可以在提示中使用的不同类型的修饰符。 如果您想要直观地了解修饰符如何影响我们给出的示例之外的图像,您可以使用 https://openart.ai 上的搜索功能来查看更多信息。

● Photography 摄影
● Art Mediums 艺术媒介
● Artists 艺术家
● Illustration 插图
● Emotions 情绪
● Aesthetics 美学

Photography 摄影

在这里插入图片描述

在这里插入图片描述
Photography Styles
在这里插入图片描述
Photography Styles
在这里插入图片描述
Cameras
在这里插入图片描述
Lenses
在这里插入图片描述
Lighting
在这里插入图片描述

艺术媒介

在这里插入图片描述
Mediums
在这里插入图片描述
在这里插入图片描述

艺术家

在这里插入图片描述
Portrait
Derek Gores, Miles Aldridge, Jean Baptiste-Carpeaux,
Anne-Louis Girodet
Landscape
Alejandro Bursido, Jacques-Laurent Agasse, Andreas
Achenbach, Cuno Amiet
Horror
H.R.Giger, Tim Burton, Andy Fairhurst, Zdzislaw Beksinski
Anime
Makoto Shinkai, Katsuhiro Otomo, Masashi Kishimoto,
Kentaro Miura
Sci-fi
Chesley Bonestell, Karel Thole, Jim Burns, Enki Bilal
Photography
Ansel Adams, Ray Earnes, Peter Kemp, Ruth Bernhard
Concept artists (video game)
Emerson Tung, Shaddy Safadi, Kentaro Miura

Portrait Artists (肖像艺术家)

使用以肖像画闻名的艺术家对于创造特定的风格非常有帮助。 在下面的所有图像中,一切都保持相同,包括种子,所有差异均由所选艺术家造成。 正如你所看到的,一些艺术家产生了非常深远的影响,而另一些艺术家则产生了微妙的影响。

在这里插入图片描述

Landscape Artists (景观艺术家)

制作风景时,明智的做法是指定一天的时间,例如早上、中午或晚上的时间,并设置季节。 请注意,一些艺术家只会微妙地影响输出,而另一些艺术家则会对其进行彻底的改变

在这里插入图片描述

Horror Artists (恐怖艺术家)

恐怖艺术家以制作令人毛骨悚然的图像而闻名,但他们可以与其他艺术家混合制作令人愉悦的图像。 请参阅本书后面有关混合艺术家的页面

在这里插入图片描述

Anime Artists(动漫艺术家)

在使用动漫艺术家时,重要的是要记住他们所关注的风格以及他们来自哪个时期

在这里插入图片描述

Sci-fi Artists (科幻艺术家)

选择正确的艺术家可以极大地改变输出。 科幻艺术家往往有非常独特的风格。 请记住,您不仅可以使用传统艺术媒介,还可以使用电影中的艺术家。

在这里插入图片描述

Photography Artists (摄影艺术家)

不要忘记您可以在提示中使用著名的摄影师。 根据您的拍摄重点,尝试使用风景或肖像摄影师。

在这里插入图片描述

Concept Artists 概念艺术家(视频游戏)

当谈到概念艺术家时,他们中的一些人会让场景变得更好,而另一些人会做出更好的角色设计

在这里插入图片描述

高级技术 - 混合艺术家风格

与艺术家一起构建提示可以使您的形象更加精致。 对您来说,在正确的类别中使用多名艺术家非常重要,这样才能拥有自己的风格,但请记住它可以是多个类别

在这里插入图片描述

混合艺术家风格(肖像)

与艺术家一起构建提示可以将您的形象进一步完善

在这里插入图片描述

混合艺术家风格(风景)

注意艺术家风格结合的微妙方式。 您不限于两位艺术家。您可以使用任意多个艺术家。

在这里插入图片描述

艺术家参考资料的外部链接

Google Arts and Culture
Stable Art Artist Guide
SD Artist Collection
The Al Art - Modifiers Guide

Illustration(插图)

3D 插图

Stable diffusion 可用于创建您可以想象的任何 3D 场景或物体!

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

角色设计

在创建角色时,您首先要对他们进行广泛的描述,例如“男性兽人”,然后向他们添加更多内容,例如“金属盔甲”。 之后,在生成图像的同时构建细节,并确保添加适合人物的艺术家

在这里插入图片描述
最后一张图像是使用更高比例的 img2img 制作的,以获得更好的图像细节。 强度为30,但您可以在制作自己的图像时将其调整为您想要的强度

情绪

在这里插入图片描述
简单的感觉修饰符可以设定场景的气氛!

在这里插入图片描述

积极的情绪

在这里插入图片描述
在这里插入图片描述

负面情绪

在这里插入图片描述
在这里插入图片描述

Aesthetics(美学)

在这里插入图片描述

Vibrant(充满活力)

在这里插入图片描述

Gloomy(阴沉)

在这里插入图片描述

Historic(历史性)

在这里插入图片描述

4. Magic words(魔术词)

在这里插入图片描述

HDR, UHD, 64K

诸如HDR,UHD,4K,8K和64K之类的质量词可以产生巨大的差异。
Seed: 1000
在这里插入图片描述

Highly detailed(高度详细)

诸如高度详细的质量词可以产生巨大的差异。
Seed: 2437020575
在这里插入图片描述

Studio lighting(工作室照明)

工作室照明确实可以为图像添加一些不错的纹理
Seed: 4035355907

在这里插入图片描述

Professional(专业的)

加入 Professional可以大大改善图像中的颜色对比度和细节
Seed: 851639
在这里插入图片描述

Trending on artstation(在Artstation上流行的)

Seed: 4092599551

在这里插入图片描述

Unreal engine

Seed: 868591112

在这里插入图片描述

Vivid Colors(鲜艳的色彩)

添加Vivid Colors,,为您的图像增添生命
Seed: 1

在这里插入图片描述

Bokeh

散景模糊了背景并突出了主题。 就像iPhone肖像模式
Seed: 432543543

在这里插入图片描述

High resolution scan(高分辨率扫描)

想要一张历史悠久的照片吗? 添加“高分辨率扫描”
Seed: 88114615
在这里插入图片描述

Sketch vs Painting(素描与绘画)

素描几乎总是会创建铅笔图像,而绘画则增加了颜色,并且可能会提供一个较旧的场景
Seed: 851636
在这里插入图片描述

5.Stable Diffusion 参数

分辨率 - 默认值为512x512

此参数直接向前。 您选择生成的图像的宽度和高度。 但是,重要的是要知道该模型是在512x512图像上训练的,并且通常这些维度提供了最佳的质量和构图,因此建议您坚持作为初学者。

在这里插入图片描述
即使所有参数固定,更改分辨率也将完全更改生成的图像。 尽管它可能具有类似的颜色和构图

此参数增加了所需的VRAM,以及生成所需的时间

Classifier Free Guidance 分类器免费指导(CFG) - 默认为7

您可以将此参数视为“创造力与提示”量表。 较低的数字使AI更有创造力的自由,而更高的数字则迫使它坚持提示。

Prompt: a red bird drinking water from a lake, children’s book painting

在这里插入图片描述
此参数不会影响所需的VRAM或生成时间。

Step count (步骤计数) - 默认值为50

Stable Diffusion 从充满噪声的画布开始,并逐渐达到最终输出,从而创建图像,该参数控制着这些denoising步骤的数量。 通常,较高的情况更好,但在一定程度上,对于初学者来说,建议坚持默认值。

在这里插入图片描述
此参数不会影响所需的VRAM,但是增加它与生成图像所需的时间成正比

seed(种子) - 默认值是“随机”

种子是控制初始噪声的数字。 种子是每次固定所有参数时每次生成不同图像的原因。 默认情况下,在大多数Stable Diffusion的实现中,种子每次生成图像时都会自动更改。 如果保留提示,种子和所有其他参数相同,则可以获取相同的结果

Prompt: photo of a rabbit driving a bicycle, in Tokyo at night

在这里插入图片描述

Sampler(采样器)

Diffusion 采样器是用于在生成过程中降低噪点的方法,并且由于它们在计算图像生产中的下一步的方式方面有所不同,因此它们需要不同的持续时间和不同的步骤来达到可用的图像。 我们建议初学者使用DDIM,因为它很快,并且通常只能以10个步骤生成好的图像,从而轻松快速地进行实验和改进
在这里插入图片描述
kawaii tiny cute unicorn emoji made of clay, iOS emoji , 3D clay blender render, rich vivid colors, smooth gradients,
isometric front view, diffuse lighting, octane render, unreal engine

6. Important Tips(重要提示)

在这里插入图片描述
什么时候使用不同的CFG值?

CFG 2-6:创意,但可能不会遵循提示
CFG 7-10:建议大多数提示。 创造力与指导世代之间的良好平衡
CFG 10-15:当您确定您的提示是否良好/具体时。
CFG 16-20:除非提示详细详细,否则通常不建议使用。 可能会影响连贯性和质量

什么时候使用不同的CFG值? - 例子

在这里插入图片描述
anime illustration of a blue rabbit, riding a scooter near a lake, with the sun in the sky

在有多个 subject(主题) 的提示词中,最好提高CFG量值

seeds 的力量

有些种子可以提示更好,因此请尝试保存好种子,并稍微调整提示,以获取所需的东西,同时保持相同的构图。 这也可以用于测试不同修饰符的效果。

在这里插入图片描述
Token efficiency(令牌效率)

您的提示有效地限于75个令牌。 如果您有一个长时间的及时工作,请尝试有效地使用不会显着增加您的含义的单词。 一个典型的例子是,将艺术家用作修饰符来获得特定样式时。 这是一些提示及其令牌计数。 他们都会生产出看起来像是文森特·梵高(Vincent Van Gogh)

● A horse in the style of Vincent Van Gogh (11)
● A horse in the style of Van Gogh (10)
● A horse by Vincent Van Gogh (7)
● A horse by Van Gogh (6)
● Horse by Van Gogh (6)
● Horse Van Gogh (5)

单词的顺序可能与单词本身一样重要
在尝试制作异常创作时,此技巧特别有用。

在这里插入图片描述
在上面的示例中,除非您将其放置在提示开始时,否则不会出现机枪!

不要忘记传统工具!

您拥有一个很好的生成,但是具有混乱的面部? 使用GFP-GAN修复它(在线使用)

在这里插入图片描述
负提示词

您可以使用负面提示来告诉Stable Diffusion,图像中不包含什么。 当与生成使用相同的种子配对时,这特别有用!

在这里插入图片描述

7. Img2Img in/out painting

在这里插入图片描述

从素描到专业艺术

使用img2img,您可以使用文本说明轻松地将任何简单的草图变成美丽的艺术

在这里插入图片描述
Digital painting of a magical pirates ship floating on a purple mist cloud, over a desert, vibrant colors, 3D pixar render, delicate details, strong sun rays

转换样式

您有可以通过编辑提示词来更改图像的样式

在这里插入图片描述
Img2Img 变体

Img2Img 可用于创建图像的变体并获得类似的图像

在这里插入图片描述
img2img+多AI 问题

现在,此方法可能并不总是给您想要的,因为Dalle不能做得很好

在这里插入图片描述
img2img 变体 低强度

img2img 可用于创建图像的变体并获得类似的图像

在这里插入图片描述

Inpainting

该技术可用于通过完全删除或更改图像中的主题或仅修复小细节来修复图像的一部分

在这里插入图片描述

Outpainting/uncropping

您可以使用此技术扩展真实/生成的图像,因为稳定的扩散喜欢创建许多裁剪的图像,因此非常有用

在这里插入图片描述

8 OpenArt 展示

在这里插入图片描述
在这里插入图片描述
感谢您阅读及时的书。 请记得与他人分享

访问https://openart.ai以获取更多资源,工具。 在OpenArt上构建您的投资组合。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值