如何用AI给线稿上色？

今天遇到一个问题：如何用AI给线稿上色？

先放一张基于Stable Diffusion的ControlNet插件canny功能的效果图：

线稿原图：

上色：

一、Stable Diffusion的安装

作为开源软件，Stable Diffusion有很多安装包，为了升级、更新环境方便，国内强烈推荐使用秋叶一键包。

秋叶一键包解压即可使用，非常简单。

性能设置方面：

引擎选默认即可；

显存优化根据实际情况，比如8G就要选优化，12G就可以选无优化；

Cross-Attention优化方案，墙裂建议“尝试使用xformers”；

计算精度和显卡配置有关，8G以下都不要开，8G以上开后三个。

其余的设置默认。

网络设置方面：

开放远程连接可以在局域网（如其他笔记本）访问画图的机器，如果是本机则不需要，其余的默认。

用户体验方面随便设置：

安全型设置方面，如果开启了远程连接，可以开放远程访问时安装插件，免得再来回切换电脑。

到这里，就可以打开启动器，画第一张图了。

二、目录说明

解压缩后，这几个文件夹比较常用（其他目录基本一直躺到天荒地老）。

一是models，所有的大模型都要拷贝至models\Stable-diffusion，XL的大模型也放到这里，微调模型拷贝至models\lora

二是extensions，所有的插件都装在这里；

三是outputs，Stable Diffusion输出的所有图片都在这个目录；

四是embeddings，这是存放嵌入模型的地方。

三、绘图界面

启动器启动后，会自动打开一个网页，在这里就可以绘制图片了。

仅仅是有绘图工具还是不够的，还需要安装很多好用的插件，大家可以往前翻我发的文章，推荐了我在用的各种插件，以及安装方式。

四、如何升级版本（切换分支）

选择“版本管理”

可以选择稳定版、开发版。

如果想跟着最新潮流，建议选择开发版，需要点击“切换分支”。开发版更新非常频繁，通常至少一天一个版本，有时候（比如节假日）一天就会有N个版本。

如果想保持稳定，选择稳定版的主线即可。

选择完毕后，启动启动器，就会自动升级。

五、安装ControlNet插件和相关模型

在启动器的版本管理处，点击“安装新扩展”，然后输入 sd-webui-controlnet，点击安装即可。

或者在WebUI界面的扩展-从网址安装，输入该插件的网址进行安装。

https://github.com/Mikubill/sd-webui-controlnet

安装后不要急着重启，需要安装对应的模型。

以现在最常用的SDXL系列模型为例，线稿模型推荐使用sai_xl_canny_256lora.safetensors，

下载地址：

https://hf-mirror.com/lllyasviel/sd_control_collection/tree/main

安装路径：

sd-webui\extensions\sd-webui-controlnet\models

安装完毕后重启启动器。

六、使用canny给线稿上色

如图，在WebUI界面点开ControlNet处理。

1、Enable，启用ControlNet。

2、上传线稿图片，选中Allow Preview

3、类型选择Canny

4、处理器选canny，模型选上文下载的sai_xl_canny_256lora.safetensors （前提是使用SDXL模型）

5、其余的选项默认即可。

提示词：

score_9,score_8_up,score_7_up,realistic,1girl,jirai_kei,solo,looking_at_viewer,medium_breasts,long_sleeves,belt,pink_shirt,simple_background,frills,white_background,1girl,mayuzumi_fuyuko,little_smile,

负向提示词：

score_6,score_5,score_4,worst quality,low quality,bad anatomy,bad hands,missing fingers,fewer digits,source_furry,source_pony,source_cartoon,3d,blurry,

执行后生成一批图片，选择满意的即可。

本文推荐模型：waiREALCN_v30

完整参数：

score_9,score_8_up,score_7_up,realistic,1girl,jirai_kei,solo,looking_at_viewer,medium_breasts,long_sleeves,belt,pink_shirt,simple_background,frills,white_background,1girl,mayuzumi_fuyuko,little_smile,

Negative prompt: score_6,score_5,score_4,worst quality,low quality,bad anatomy,bad hands,missing fingers,fewer digits,source_furry,source_pony,source_cartoon,3d,blurry,

Steps: 28, Sampler: DPM++ 2M SDE, Schedule type: Exponential, CFG scale: 5, Seed: 2253375494, Size: 768x1024, Model hash: 089c622c6f, Model: waiREALCN_v30, Clip skip: 2, Style Selector Enabled: True, Style Selector Randomize: False, Style Selector Style: base, ADetailer model: face_yolov8n.pt, ADetailer confidence: 0.3, ADetailer dilate erode: 4, ADetailer mask blur: 4, ADetailer denoising strength: 0.4, ADetailer inpaint only masked: True, ADetailer inpaint padding: 32, ADetailer version: 24.5.1, ControlNet 0: “Module: canny, Model: sai_xl_canny_256lora [566f20af], Weight: 1.0, Resize Mode: Crop and Resize, Processor Res: 512, Threshold A: 100.0, Threshold B: 200.0, Guidance Start: 0.0, Guidance End: 1.0, Pixel Perfect: False, Control Mode: Balanced”, Downcast alphas_cumprod: True, Version: v1.9.3-4-g801b72b92b

换个室内设计的例子，

线稿：

AI上色后：

完整参数：

((best quality)),((masterpiece)),((realistic)),living room,Modern minimalist Nordic style,Soft light,Pure picture,(Bright colors:1.2),Symmetrical composition,orange theme,

Negative prompt: text,word,cropped,low quality,normal quality,username,watermark,signature,blurry,soft,soft line,curved line,sketch,ugly,logo,pixelated,lowres,

Steps: 25, Sampler: DPM++ 2M SDE, Schedule type: Karras, CFG scale: 7, Seed: 1353285468, Size: 768x512, Model hash: 089c622c6f, Model: waiREALCN_v30, Clip skip: 2, Style Selector Enabled: True, Style Selector Randomize: False, Style Selector Style: base, ControlNet 0: “Module: canny, Model: sai_xl_canny_256lora [566f20af], Weight: 1.0, Resize Mode: Crop and Resize, Processor Res: 512, Threshold A: 100.0, Threshold B: 200.0, Guidance Start: 0.0, Guidance End: 1.0, Pixel Perfect: False, Control Mode: Balanced”, Downcast alphas_cumprod: True, Version: v1.9.3-4-g801b72b92b

写在最后

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

若有侵权，请联系删除