前言
你还在为用Ai生成写实效果图而欣喜,结果转头看到了别人用stablediffusion玩多种风格…
看了看别人的各种风格的生成图,又看了看自己手上千篇一律的写实效果。总感觉哪里不对劲…怎么别人的SD这么炫酷呢。
**今天小编就来给大家分享如何使用线稿图来生成多风格图吧~**▼
本文涉及模型、插件下载请扫描免费获取哦
02
在开始前,需要准备一些模型文件。包括checkpoint模型和loar模型。
checkpoint模型常被称为主模型或基础模型(常被称为大模型),它是一种经过训练的图片合集。大模型决定了创作的基础方向,选择相对应的大模型,才能生成合适的图。例如人物就选择人物类大模型,建筑就选建筑类大模型。
大家可以在civitai官网中去下载,网站里面有很多模型提供下载,搜索architecture,里面有分为checkpoint和loar两种,这里需要下载checkpoint,点进去会有文件大小,关键词推荐,适用的底模型等。
点击图片的右下角图标可以看到作者生成这个模型用的关键词,生成参数等详细信息。
lora模型其实是一种主模型的微调模型,就是大家说的小模型,就像风格样式滤镜。
同样是在civitai官网中去下载。
有些loar模型需要对应的提示词才能开启,记得下载的时候看看作者推荐的提示词。
下载后打开启动器界面,模型管理,找到对应的模型列表,添加模型,选择下载的文件就可以了。
Stable Diffusion界面,左上角那里点击刷新按钮,就能出现新的大模型了。
loar模型需要点击生成下面的红色图标,选择loar,这里就会有安装好的loar模型。
案例教学
03
1.先在civitai官网中下载需要的loar模型。
**2.选择一个基础大模型,**原SD自带的大模型就可以。
3.输入提示词,用翻译软件来中英翻译一波,提示词越靠前面,权重越大。
4.输入反提示词,就是一些文字,水印,图标,低质量等。
5.进行一些基础的设置,采样方法选择DDIM,迭代步数20,每批数量改成4。
6.下方的contronet中拖入模型草图。一定要点击enable,下面的preprocessor选择mlsd,这个适用于模型图片。model也要选择对应的mlad哦。(以下是常用的模型选择,线稿图片就选择canny或者scribble)
Canny边缘检测:对建筑线条的捕捉很不错。
Depth & Depth Leres:这个预处理器有助于生成输入图像的深度估计。深度通常用于控制图像内物体的空间定位。浅色区域意味着它离用户更近,而深色区域则离用户更远。
MLSD:最适合生成强有力的线条,这些线条能够检测出需要独特和刚性轮廓的建筑和其他人造作品。但是它不适用于处理非刚性或弯曲的物体。MLSD适用于生成室内布局或建筑结构,因为它可以突出直线和边缘。(建筑常用)
Scribble:从简单的黑白线条画和草图生成图像。常用于建筑线条草图。
7.点击下面的预览结果,看看线条是否清晰。
8.然后选择loar(也可以在填写提示词的时候就选择)。将光标点在提示词结尾,选择风格loar模型,就能添加进去。
注意,有些loar模型需要对应的提示词才能开启,记得下载的时候看看作者推荐的提示词。
在这里可以修改loar的权重,可控制lora模型对主模型的影响程度。一般修改在0.7-1,过大了生成效果很奇怪。
重点!loar是可以叠加使用的,几个loar叠加可能会产生不一样的效果!
9.多次生****成选择最佳效果图片。
tips:有些风格还是选择对应的大模型和laor模型结合使用,效果会更好**。使用模型作者的参数,也能更还原。**
感觉生成的图不够清晰,可以点击这里的hires,可以高清放大,会有放大的倍数调整,越大花的时间越多。
风格化生成图片
03
以下是使用Stable Diffusion生成的一些风格化图片:
这里分享给大家一份Adobe大神整理的《AIGC全家桶学习笔记》,相信大家会对AIGC有着更深入、更系统的理解。
有需要的朋友,可以点击下方免费领取!
AIGC所有方向的学习路线思维导图
这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。如果下面这个学习路线能帮助大家将AI利用到自身工作上去,那么我的使命也就完成了:
AIGC工具库
AIGC工具库是一个利用人工智能技术来生成应用程序的代码和内容的工具集合,通过使用AIGC工具库,能更加快速,准确的辅助我们学习AIGC
有需要的朋友,可以点击下方卡片免费领取!
精品AIGC学习书籍手册
书籍阅读永不过时,阅读AIGC经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验,结合自身案例融会贯通。
AI绘画视频合集
我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,科学有趣才能更方便的学习下去。