stablediffusion的controlnet线稿只能用1.5的底模吗，有XL能用的线稿模型吗？

最新推荐文章于 2024-08-12 14:41:52 发布

AIGC零基础入门小白

最新推荐文章于 2024-08-12 14:41:52 发布

阅读量1.1k

点赞数 15

文章标签： stable diffusion midjourney AIGC AI作画人工智能 chatgpt AI写作

本文链接：https://blog.csdn.net/2301_80239908/article/details/139766918

版权

推荐一个超级好用的 SDXL-ControlNet 模型：Anytest，不止是线稿转绘，还能帮你补全线稿以及二创哦！

而且操作很简单，不需要预处理器，直接使用即可。

基础的功能包括根据线稿生成图像，对图片进行风格转绘，这个没啥好讲的。

Anytest 有几个有趣的用法，针对轮廓不明显的构图，也可以生成质量不错的图片。

不仅如此，Anytest 还可以帮你完善不完整的草图，包括在图片上进行二创。

这么讲小伙伴们可能没有太大感觉，我们直接看效果吧！

我们还是在 ComfyUI 中进行演示，工作流就是基础的 ControlNet 工作流。

作者提供的 Anytest 的模型比较多，推荐我们使用的主要是红框中的两个模型，这两个模型的兼容性比较好。

不过既然有 V3 和 V4，那理论上来说应该 V4 更优秀一些才对，不过也不能这么绝对！

我们就以这两个模型来体验对比一下吧！

不过这两个模型有点大，如果显存不够的小伙伴可以下载 dim256 版本的，可以看到模型的名字中有 am 和 pn 之分，am 代表是动漫大模型，pn 代表是以 Pony 为基础模型炼制的大模型，小伙伴们按需下载就可以了。

模型下载链接和网盘都会放在文末。

好了，模型介绍完了，我们来看看具体的效果如何。

先来个简单的根据画稿生成图片，两个模型都精确的识别了线稿并生成了图片，个人觉得 v4 的出图效果更棒一些。

提示词：analog film photo One girl, casual, faded film, desaturated, 35mm photo, grainy, vignette, vintage, Kodachrome, Lomography, stained, highly detailed, found footage

根据图片生成图片，这次感觉两个模型生成的图片区别不是很大，人物的复刻也算是完美，当然我们也可以使用不同的 Lora 模型进行风格转绘。

提示词：(masterpiece), (best quality), (ultra-detailed), One girl, ahanfu, illustration, disheveled hair, detailed eyes, perfect composition, moist skin, intricate details, earrings, by wlop

基础功能介绍完了，我们来看点不一样的。

即使是很粗糙的人物轮廓，Anytest 也可以很好的绘制出人物以及场景，不过这里需要注意的是，图片中的人物细节以及场景的细节尽量在提示词中有所体现，要不然效果不太好哦！

不同提示词的出图效果差别还是蛮大的，如果效果不佳可以试着调整下提示词。

提示词：( masterpiece), (best quality), (ultra-detailed), 1 girl, blouse, stand on the bridge and watch the fireworks from far away., illustration, disheveled hair, detailed eyes, perfect composition, moist skin, intricate details, earrings, by wlop

还有这种多人的也可以。

提示词：(masterpiece), (best quality), (ultra-detailed), 2girl,summer_dress,, illustration, disheveled hair, detailed eyes, perfect composition, moist skin, intricate details, earrings, by wlop

即使是上传不完整的线稿图也可以自动补全线稿并生成图片。

提示词：High Fashion, 1girl, , dynamic, dramatic, haute couture, elegant, ornate clothing, High Fashion

还有一种很有趣的用法。

我们找一张自己喜欢的草图，在草图上随便画几笔，比如下边这个作者在左边图片的基础草图上画了几条粗线条，最终通过 Anytest 完美的融合进了图片里。

我们直接就用他这张图来试试效果吧，这里说一下，新增的线条就用正常的画笔工具画就行了，不是蒙版哦！

提示词：art illustrating insane amounts of raging elemental energy turning into 1girl, avatar of elements. magical surrealism, wizardry. best quality, high resolution

效果还是很不错滴。

不仅可以在草图上，在图片上也可以进行二次创作然后生成新的图片。

提示词：surrealist art 1girl，Scarves . dreamlike, mysterious, provocative, symbolic, intricate, detailed

想要动漫人物或者线稿人物转真人也可以的，找一个支持真实人像的大模型就可以了，不过 V3 看着还是有点像动漫风格，V4 的真实人像风格就比较明显了，从这里看 V4 的泛化性更好一些。

提示词：glamorous photo 1girl，best quality,masterpiece,realistic, high fashion, luxurious, extravagant, stylish, sensual, opulent, elegance, stunning beauty, professional, high contrast, detailed

好了，今天的分享就到这里了，感兴趣的小伙伴快去试试吧！

最后想说 AIGC（AI Generated Content）技术，即人工智能生成内容的技术，具有非常广阔的发展前景。随着技术的不断进步，AIGC的应用范围和影响力都将显著扩大。以下是一些关于AIGC技术发展前景的预测和展望：

1、AIGC技术将使得内容创造过程更加自动化，包括文章、报告、音乐、艺术作品等。这将极大地提高内容生产的效率，降低成本。2、在游戏、电影和虚拟现实等领域，AIGC技术将能够创造更加丰富和沉浸式的体验，推动娱乐产业的创新。3、AIGC技术可以帮助设计师和创意工作者快速生成和迭代设计理念，提高创意过程的效率。

未来，AIGC技术将持续提升，同时也将与人工智能技术深度融合，在更多领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程。

对于从来没有接触过AI绘画的同学，我已经帮你们准备了详细的学习成长路线图。可以说是最科学最系统的学习路线，大家跟着这个大的方向学习准没问题。