【AI绘画SD教程】Lineart线稿上色和IP-Adapter 人像写真插件实操教学，轻松助你生成多种风格的AI人像大片！SD零基础入门到精通教程

最新推荐文章于 2024-10-09 14:08:14 发布

画画的小强

最新推荐文章于 2024-10-09 14:08:14 发布

阅读量914

点赞数 18

文章标签：人工智能 AI作画 stable diffusion AIGC AI绘画线稿上色 AI人像

本文链接：https://blog.csdn.net/A1353192296/article/details/142782313

版权

大家好，我是画画的小强

今天给大家分享一下如何用AI绘画工具StableDiffusion当中的 LineArt线稿处理和 IP-Adapter 实操教学。

本期教程开始之前，请先确保你的电脑已经安装好StableDiffusion这款AI绘图工具，如你还没有安装使用，那么可以看看我的往期入门教程：AI绘画SD下载安装教程，学习AI绘画软件必看（SD怎么安装，SD安装教程，安装stable diffusion软件必看）

1、LineArt简介

LineArt是Stable Diffusion中的一种扩展模型，旨在通过提供额外的线稿信息，控制和引导图像生成的方向。这个模型可以帮助用户将草图、线稿转换成更加详细和高质量的图像。

主要用途

AI真人化： 将线稿转换成逼真的人像图。

角色二创： 利用风格化迁移和背景调整，进行高质量的角色二次创作。

线稿上色： 将单纯的线稿图像转换成彩色图像。

产品设计： 将生成的图像应用到产品设计中，如T恤、海报等。

我给大家准备了一份完整版的AI绘画全套学习资料，已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

2、动漫人物AI真人化

首先在图生图中加载你需要真人化的动漫原图，然后根据画面特征输入正向提示词和反向提示词，记得要加入一些画面、质量的起手式哦，如果你担心自己描写的不够详细和准确，你也可以点击生成下方的"CLIP反推"来反推提示词

当然也可以使用WD标签器进行反推，反推完后可以根据实际情况对提示词进行微调。然后务必选择一个真实系的模型，比如MajicMix Realistic(适合亚洲人)，Realistic Vision(适合欧美人)，A-Zovya Phtotreal(适合非洲人)。

当然，也别忘了设置合适的采样方法和尺寸等其他一切你需要的参数。为了使生成的真人图片更接近于原图，所以重绘幅度建议低于0.5

点击生成后可以对比一下原图，如果不满意可以多生成几次选择一张你最满意的保留。

但如果遇到一些细节比较丰富的动漫原图时候，会发现生成的真人图细节还原会和原图有些许出入。

这时候我们就需要用上ControlNet来协助我们，我们今天就要用到其中的LineArt，它是基于边缘线条的识别来引导图像的控制，可以从图片中提取边缘轮廓，这样便可以更为准确还原原图的细节特征。

我们在之前的基础上开启ControlNet，勾选"完美像素模式"，选择Lineart的预处理和模型，其中"Lineart_anime"更适合提取动漫图片的线条，我们选择它。

再次生成照片，我们便发现新生成的图片的细节特征就已经十分还原原图的了。

关于LineArt预处理器的区别

在ControlNet LineArt中，不同的预处理器模型有不同的功能和特点，选择适合的预处理器模型便是我们能否高质量生成图片的关键，以下是这些模型的具体区别和功能说明：

如果你的SD中的Lineart预处理没有这些模型，那么可以扫描免费获取模型文件哦，下载好后模型文件放在_extensions\sd-webui-controlnet\models_目录中

lineart_standard（标准线稿提取 - 白底黑线反色）：

功能： 从白底黑线的图像中提取线稿，并进行反色处理。

适用场景： 适用于标准的线稿图像处理，通过反色获得更加明确的线条。

invert（对白色背景黑色线条图像反相处理）：

功能： 对图像进行反相处理，使白色背景变成黑色，黑色线条变成白色。

适用场景： 适用于需要反转颜色的图像处理，通常用于特殊效果的图像转换。

lineart_realistic（写实线稿提取）：

功能： 从写实图像中提取线稿，保留较多的细节。

适用场景： 适用于处理写实风格的图像，能保留更多细节和复杂线条。

lineart_coarse（粗略线稿提取）：

功能： 提取图像中的粗略线稿，线条较为简单粗糙。

适用场景： 适用于需要快速提取简单线条的场景，适合草图和初步设计。

lineart_anime_denoise（动漫线稿提取 - 去噪）：

功能： 从动漫图像中提取线稿，并进行去噪处理，得到更加清晰的线条。

适用场景： 适用于处理动漫风格的图像，通过去噪获得清晰的线稿。

lineart_anime（动漫线稿提取）：

功能： 从动漫图像中提取线稿。

适用场景： 适用于处理动漫风格的图像，保留动漫特有的线条和风格。

3、IP-Adapter简介

IP-Adapter 是一种在图像生成和处理过程中应用的预处理器，它主要用于实现图像风格化和特定效果的转换。IP-Adapter可以真正理解图片的具体内容和含义，并利用它对生成图片进行微调并输出，它主要应用包括：

风格化迁移： 将输入图像转换为特定的艺术风格或效果。例如，将普通照片转换为动漫风格、素描风格等。

特定效果应用： 在图像中应用特定的视觉效果，如老电影效果、卡通效果等，使图像具有特定的艺术表现力。

IP-Adapter 预处理器适用于多种场景，包括但不限于：

图像增强： 可以用于图像的后期处理，添加特定的效果，使图像更具吸引力。

商业设计： 在广告、海报设计等商业项目中，使用 IP-Adapter 可以快速实现图像风格化，满足不同客户的需求。

4、人物角色二次创作

当我们熟练掌握了ControlNet之后，我们便可以通过IP-Adapter尝试对人物角色进行二次创作，让他们拥有不同着装、外观、皮肤等等。

IP-Adapter模型下载：

请看上方或文末扫描免费获取IP-Adapter的模型文件，模型文件放在_extensions\sd-webui-controlnet\models_目录中

示例

我这里想让我原图的风格都变成星空类型的，点击文生图，在ControlNet单元0中先导入一张星空图，启用并勾选完美像素模式，控制类型选择IP-Adapter，，预处理器和模型也都选择IP-Adapter相关，权重控制和引导时间可以适当放松。

然后在ControlNet单元1中导入人物原图，同样启用并勾选完美像素模式，然后将控制类型选择为Lineart，并选择适合你画风的Lineart预处理器和模型，我这里是动漫的画风，就选择了lineart_anime。

然后选择一个适合你图片风格的大模型，并且输入正向提示词和反向提示词，你也可以对图片进行反推获得提示词。

正向提示词：1girl,artist name,bangs,blue sky,blurry,blurry background,blurry foreground,blush,bow,bowtie,brown eyes,brown hair,bubble,cloud,collared shirt,crescent moon,dandelion,day,depth of field,eyebrows visible through hair,floating hair,flower,grin,hair ornament,lens flare,long hair,looking at viewer,moon,outdoors,red bow,red bowtie,school uniform,shirt,short sleeves,signature,sky,smile,solo,striped,sun,sunflower,sunflower hair ornament,teeth,upper body,water drop,white shirt,wind,yellow flower,``(masterpiece:1.2),best quality,masterpiece,highres,original,extremely detailed wallpaper,perfect lighting,(extremely detailed CG:1.2),drawing,paintbrush,

反向提示词：NSFW,(worst quality:2),(low quality:2),(normal quality:2),lowres,normal quality,((monochrome)),((grayscale)),skin spots,acnes,skin blemishes,age spot,(ugly:1.331),(duplicate:1.331),(morbid:1.21),(mutilated:1.21),(tranny:1.331),mutated hands,(poorly drawn hands:1.5),blurry,(bad anatomy:1.21),(badproportions:1.331),extra limbs,(disfigured:1.331),(missingarms:1.331),(extra legs:1.331),(fused fingers:1.61051),(too many fingers:1.61051),(unclear eyes:1.331),lowers,bad hands,missing fingers,extra digit,bad hands,missing fingers,(((extraarms and legs))),

最后选择合适的图片尺寸后生成即可，可以看到我们星空风格已经融入进我们的原图中了。