超级干货一篇就懂-优雅草央千澈手把手教你把你喜欢的动漫人物使用AI真人化,动漫角色真人化然后再动起来-优雅草央千澈-带你一文就知晓-知识永远学不完-无穷无尽-优雅草科技

超级干货一篇就懂-优雅草央千澈手把手教你把你喜欢的动漫人物使用AI真人化,动漫角色真人化然后再动起来-优雅草央千澈-带你一文就知晓-知识永远学不完-无穷无尽-优雅草科技

软件介绍(stable diffusion 简称SD)

首先我们要用到的软件叫做stable diffusion,‌Stable Diffusion‌是一种基于潜在扩散模型的深度学习文本到图像生成模型,由慕尼黑大学的CompVis研究团体开发。它主要用于根据文本描述生成详细图像,同时也适用于其他任务,如内补绘制和外补绘制。‌

技术架构和原理

Stable Diffusion的生成图像原理可以比喻为一种“逐渐揭示”的过程。它通过逐步添加和减少噪声来生成图像。首先,从一个完全模糊的图像开始,通过一系列步骤逐渐揭示出图像中的细节和形状,使其变得更加清晰和真实。这个过程包括正向扩散和逆向扩散两个步骤:

‌正向扩散过程‌:将高斯噪声逐步添加到输入图像中。
‌逆向扩散过程‌:通过训练神经网络来近似去除图像中的噪声,从而生成清晰的图像。

训练数据和使用场景

Stable Diffusion在Laion-2B-en数据集上进行训练,该数据集包含23.2亿个图像及英文对照文本。与早期的Latent Diffusion相比,Stable Diffusion使用了更多的训练数据,并通过数据筛选提升了样本质量。Stable Diffusion不仅限于图像生成领域,还被广泛应用于自然语言处理、音频视频等生成领域。

最新进展和应用实例

Stable Diffusion的最新版本可以在1024x1024像素的级别上生成可控的图像,生成效率比以往的Diffusion模型提高了30倍。此外,Stable Diffusion的源代码和模型权重已公开发布在GitHub和Hugging Face,可以在大多数配备适度GPU的电脑上运行。

软件地址:GitHub - AUTOMATIC1111/stable-diffusion-webui: Stable Diffusion web UI

这是软件的介绍,在GitHub

其次我们还需要用到chillout mix模型

chillout mix模型

‌ChilloutMix模型‌是一个基于Stable Diffusion 1.5的模型,主要用于生成高质量的东亚女性人像。该模型因其出色的生成效果而迅速走红,尤其是在生成真实东亚女性人像方面表现出色。

模型版本和特性

ChilloutMix目前主要有两个版本:ChilloutMix V1和ChilloutMix-Ni。这两个版本都是基于SD1.5进行训练的,但ChilloutMix-Ni在性能上有一些优化和改进‌
。ChilloutMix的强项在于生成真实东亚女性人像,但对于男性、2.5D、景观和二次元图像的直出效果稍逊,需要搭配其他LoRA模型进行尝试‌
。此外,该模型与较多真实人物如名人、明星等的LoRA模型适配较好,人物面部变化较少,可以搭配其他LoRA模型获得多样性的面部‌
使用技巧和最佳实践

在使用ChilloutMix模型时,推荐使用DDIM采样器,这种采样方法在形体、光线、阴影和细节方面表现较好,尽管出图速度较慢‌
。采样步数建议在10到100步之间,CFG Scale在5到20之间调整,以达到较好的效果‌
。此外,该模型在生成裸露肌肤部分时可能会出现类似痣的黑点,虽然少量黑点能增强真实感,但过多时会显得诡异‌
社区反馈和用户评价

ChilloutMix模型因其高质量的生成效果而受到广泛欢迎,尤其是在生成真实东亚女性人像方面表现出色。然而,由于该模型在某些情况下可能会出现不适当的内容,用户在公众场合使用时需谨慎‌总体而言,ChilloutMix是一个值得推荐的模型,尤其适合需要高质量东亚女性人像生成的场景。

准备工作-软件下载

第一步下载SD软件

前提是需要 科学上网(不知道如何科学上网先去看看如何科学上网),不然GitHub是访问不了的。

奥,还需要有git,不知道git是啥要先去下载git,百度下本文不单独说明。

在本地建个目录放软件,不要放c盘(直接给你电脑干冒烟)—-我这里存 D:\soft\sd

打开git 然后查到目录去cd

进行克隆下载
git clone GitHub - AUTOMATIC1111/stable-diffusion-webui: Stable Diffusion web UI


下载完毕,软件本身不大,但是模型是非常大的,还有各类素材是非常大的。

第二步下载模型ChilloutMix

这里我们要进入鼎鼎大名的C站去下载,https://civitai.com/ 什么???你呀没听过c站??

介绍C站:

Civitai(C站) – 全球最大AI绘画模型分享平台。基于Stable Diffusion的AI绘画模型,可以轻松分享和发现AI艺术创作资源的平台。你可以在这里浏览和下载来自越来越多创作者的数千种模型。

Civitai功能特色:

艺术创作:艺术家和设计师可以使用 Civitai 平台上的 AI 艺术模型来创作独特的艺术作品。

学习和研究:对 AI 艺术感兴趣的学者和研究人员可以通过 Civitai 平台来学习和研究稳定扩散 AI 艺术模型。

资源分享:Civitai 的用户可以在社区中分享他们的作品,获取反馈,学习新的技巧和方法,与其他用户建立联系。

在C站我们需要搜索 ChilloutMix

哇哦,相当美丽,而且有有很多个版本的模型,这里优雅草央千澈就按自身喜好选择了chilloutmix_koreanDoll

嗯 这个是针对韩国地区做的模型,好看哒哒哒

1.9g 还好还好, 非常小,优雅草央千澈的电脑 4条固态硬盘,1个T

对了 这里忘了说了,如果你没有独立显卡,或者好一点的集显,本文你可以x掉了,因为没有显卡根本用不了!

我的显卡比较入门,不咋样,但是勉强能用,

七彩虹 GTX 4060 入门小显卡,勉强跑起来,我内存16g 两条。

开始作妖(作画)

安装模型

首先第一步,我们下载了模型.ckpt文件,我们先安装大模型,

安装就是把模型放到sd的模型文件目录下

\stable-diffusion-webui\models\Stable-diffusion

自己的本地盘,运行Stable Diffusion

提示:我们选图的时候不要选择太小的图,要找高清的,尺寸大的,记住咯,

选照片

我想想,我很喜欢娜娜《NANA》用nanaN来吧,

OK 我找了一张 1440 x 2650的nana斜着头的图

下载python

准备就绪,运行sd 需要Python环境,因此我们需要先去下载Python
Python的官网 Welcome to Python.org

哇哦 又更新了, 我们下载12月3日更新的版本 Python 3.12.8 - Dec. 3, 2024

运行exe安装好Python

运行webui-user.bat 来启动 sd

这时候会等待很久,等待自动创建好所有环境。

然后我发现个问题,提示我必须使用Python 3.10.6!

没办法咯 Python Release Python 3.10.6 | Python.org

卸载我们刚最新下载的3.12.8 ,去下载 3.10.6

更换版本3.10.6


一样 下载 对应的exe安装包,我64位,
 


其次这里很重要,一定要勾选,安装到环境变量中,add to path (默认不会勾选)然后 install now

然后我们返回sd 文件 运行webui-user.bat, 发现还是不能运行

修改启动版本

venv "D:\soft\sd\stable-diffusion-webui\venv\Scripts\Python.exe"
No Python at '"C:\Python312\python.exe'
请按任意键继续. . .

那是因为之前我们运行过3.1.2版本,因此我们去修改文件

home = C:\Users\Administrator\AppData\Local\Programs\Python\Python310
include-system-site-packages = false
version = 3.10.6
executable = C:\Users\Administrator\AppData\Local\Programs\Python\Python310\python.exe
command = C:\Users\Administrator\AppData\Local\Programs\Python\Python310\python.exe -m venv D:\soft\sd\stable-diffusion-webui\venv


改成我们的版本,在启动

完美

使用软件

我们成功运行了软件

另外我们换了一张全脸图,我想着之前那图脸部不全
 


我们选择第二个功能 img2img 其实就是 img to img

核心重点来了,我们要告诉AI我们要生成一张什么样的图,因为你不告诉ai,ai可能给你生产一张乱七八糟的图。

与ai对话

重点来了 重点来了

第一,我们需要生成一张竖图,因此我们尺寸给成
1080x1920 或者768 x1280

这里我们点一下generate生成,就是一张乱图

第二,因此我们需要来给ai输入描述

我们试着来一句 A girl who is smoking 一个正在吸烟的女孩

有点意思 但是有点怪,

第三,我们使用Interrogate CLIP
这是一个很牛的功能,

‌Interrogate CLIP‌是一种工具,用于将图像内容反推成提示词(prompt),即通过图像内容生成对应的文本描述。这种技术结合了OpenAI的CLIP和Salesforce的BLIP技术,主要用于优化文本提示以匹配给定的图像。用户可以使用生成的提示与文本到图像模型(如Stable Diffusion)结合,创建出有趣的图像‌

这需要一些时间 我们耐心等待,但是优雅草央千澈发现我等了很久都没等出来,等出来一个error,优雅草央千澈忽略了一个问题,就是我输入的词太多了 反而没法反推

我只输入一个词 girl 然后再点击Interrogate CLIP 按钮,

ok 成功得到以下词:
a woman with black hair smoking a cigarette in a car seat in a anime scene with stars in the background, Eizan Kikukawa, anime visual, a character portrait, neogeo
明显好太多:
在以明星为背景的动漫场景中,一位黑发女子在汽车座椅上抽烟,菊川英山,动漫视觉,人物肖像,neogeo

再点击生成

明显好太多了 真棒,

第四,加入猛一点的作料!

先把我们AI的脑洞调整小一点,让他尽量符合原图,将Denoising strength参数调整至低于0.5,我调整为0.32

然后加入以下咒语

masterpiece, best quality,Frontal View,(detailed face)

然后我们把masterpiece, best quality,Frontal View,(detailed face),a woman with black hair smoking a cigarette in a car seat in a anime scene with stars in the background, Eizan Kikukawa, anime visual, a character portrait, neogeo,
在以明星为背景的动漫场景中,一位黑发女子在汽车座椅上抽烟,菊川英山,动漫视觉,人物肖像,neogeo
其中的,以明星为背景的动漫场景中去掉,把动漫视觉也去掉,neogeo,菊川英山也去掉

masterpiece, best quality,Frontal View,(detailed face),a woman with black hair smoking a cigarette in a car, a character portrait,

我调整来调整去 最终以

masterpiece, best quality,Frontal View,(detailed face),a girl with black hair smoking a cigarette

成功

不过头发太长了,得弄短发,
masterpiece, best quality,Frontal View,(detailed face),a girl with black short hair smoking a cigarette

哇喔 太nice了 我的天

把真人变成动态视频

最后 的最后,找优雅草来施魔法吧,把原图变成真人后,在活跃起来。

加入魔法后大家请看:

NANA变真人-动漫NANA变真人-有喜欢的动漫人物可以联系我们哟

列出一份咒语让大家学习 朗读 背诵

额外这里列出一份咒语可供参考:

画质类:

masterpiece 杰作
best quality 最佳质量
realistic 真实的
game cg 游戏 cg
4k,HDR 4K,高清
detailed face 细致的脸部

negative prompt:

low quality 低质量
worst quality 最差的质量
painting by bad-artist-anime 不良艺术家绘画动漫
painting by bad-artist 不良艺术家作画
watermark 水印
text 文本
error 错误的
blurry 模糊
jpeg artifacts JPEG伪像
signature 签名
username 用户名
artist name 艺术家名字
bad anatomy 不良解剖
logo 图标

镜头类:

Master Shot 众多人物都能完整地出现在镜头里
Wide Shot 广角镜头。又称“长镜头”Long Shot。人物全身 展现,但在画面中所占比例相对较少
Ultrawide Shot 超广角镜头
Low Angle Shot 低角度镜头
Full Shot 全景镜头。从脚到头,展现人物全身,
Medium Full Shot 中全景镜头。人物的膝盖以上(但在腰部以下)至头顶
Cowboy Shot 牛仔镜头。从大腿中部至头顶
Medium Shot 中景镜头。腰部以上(但在胸部之下)至头顶
Medium Close Up Shot 中近景镜头。胸部至头顶
Close Up Shot 特写镜头。仅头部(可挡住部分额头),并保证人物的眼睛与观众的视线一致
Extreme Close Up Shot 极特写镜头。只展示人物特定部位,比如嘴唇、眼睛、耳朵、鼻子等,一般以眼睛为主
Macro Shot 微距镜头。把微小的物体放大拍摄
Cinematic Shot 电影镜头

视觉类:

Full Body View 全身视角。
Upper Body View 上身视角
Frontal View 正视角。
Aerial View 鸟瞰视角。
Product View 产品视角。用于生成展示产品的图像,生成的产品图具有高度逼真的外观和细节
Elevation Perspective 立体透视图。用于生成平面上的建筑物体,展现其形状、大小和布局
Outer Space View 太空视角。可以看到较大范围的地球或其他星球

常用人物动作/姿势:

蹲着 squatting
张开双臂 arms wide open
敬礼salute
自拍 selie
盘腿 indian styie
跳 jumping
身体后倾leanig
双臂交叉Crossed Arms
手托腮Hand on chin
跑步Running
张开双臂arms wide open
曲腿站立Standing with bent legs
跪着kneel
拉伸stretching
躺着lying
手叉腰hand on hip
手夹腿间hand between legs
站立Standing
抱膝clasp knees
回头看looking back over shoulder
单腿站立standing on one leg
双手举起来hands Up
二郎腿cross-legged
倚墙leaning on a wall
身体拉伸 Stretching body
趴在地_上 Lying face down
侧 Lying on the side
盘腿坐着 sitting with legs crossed
抱膝坐着 Sitting with knees pulled to chest
仰卧 Lying on the back
屈膝坐着 Sitliig with knees bent
弓箭步 Archer’s pose
抱臂站立 Standing with crossed arms
伸臂腑脚 Extending arms on tiptoes
手扶膝坐着 sitting with hands on knees
侧身屈腿 Bending legs sideways while seated
瑜伽莲花姿 Lotus position in yoga
交叉腿站立 Standing with crossed legs
拳击姿势站立 Boxing stance
左腿曲起坐着 Sitting with left leg bent
右腿曲起坐着 Sitting with right leg bent
坐在脚后跟上 Sitting on heels
正坐 seiza
侧身坐 yoko zuwari
身体前驱 leaning forward
跨坐 straddle
颠倒的 upside-down
睡觉 sleeping
拍头 headpat
颤抖 trembling
弓身体 arched back
趴着翘臀 top-down
翘臀姿势 bottom-up
四肢趴地 bent over all fours
拥抱 hug
唱歌 singing
跳舞 dancing
拳打 punching
猫一样的姿势 claw pose
抱腿坐 knees up
玩水 wading
漫在水中 partiallysubmerged
浮在水上 afloat
脚在水里 soaking feet
站立一字马 standing split
膝到胸 knees to chest
双膝并拢脚分开 lknees together feet apart
双腿分开 legs apart
内八 pigeon-toed
M字腿 m legs
眨眼 eyelid pull
向后看 looking back
抬头 head tilt
手放头旁边 arm at side
手把腿抓着 leg hold
坐在椅子上 sitting on chair
蹲着 squatting
弓背 arched back
趴着 on stomach
侧躺 on side
萝莉坐 kneeling&setting on floot
战斗姿态 fighting stance
自拍 selfie
身体后倾 leaning back
盘腿 indian style
敬礼 salute
抱腿坐 huggingown legs
打斗姿势 fighting stance
手放脑后 arms behind head
提起裙子 Lifting askirt
坐在地上 Sitting on the ground
弓背姿势 Hunched back posture
身体前驱leaning forward
屈膝礼curtsy
曲腿至胸fetalposition
摸头headpat
脸贴脸cheek-to-cheek
背对背back-to-back

这些咒语 很有用,引用自 b站一位叫璇葭同学发布的tags描述词,这里不能发链接。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

卓伊凡

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值