【AI绘画】解放插画师双手！Stable diffusion通过示例图片控制AI插画动作

程序员超超

于 2024-09-29 10:09:59 发布

阅读量360

点赞数 11

文章标签：人工智能 AI作画 stable diffusion prompt

本文链接：https://blog.csdn.net/2401_85116933/article/details/142628483

版权

大家好，今天，我要与大家分享一项令人兴奋的技术突破：Stable diffusion通过示例图片控制AI插画动作，从而真正解放插画师的双手。听起来是不是很有趣呢？快来看看小编是怎么操作的吧！

随着人工智能的迅猛发展，我们已经见证了它在各个领域的应用。而插画艺术也不例外。然而，尽管AI在生成插画方面取得了显著进展，但要将插画师的创造力和技能与AI相结合仍然是一个巨大的挑战。很多时候，AI生成的插画很难符合插画师的意图和要求，限制了他们的创作空间。

稳定扩散通过示例图片控制AI插画动作是一项令人兴奋的技术突破，它在解决这一问题上迈出了重要的一步。通过这一技术，插画师可以使用示例图片来引导AI生成插画的动作和风格，从而实现更好的创作控制。

这项技术的核心在于"稳定扩散"算法。这种算法能够通过分析示例图片中的动作和细节，并将其应用于AI插画生成过程中。简而言之，它可以将示例图片中的插画动作和风格融入到AI生成的插画中，使其更加符合插画师的意图。这种算法的引入为插画师创造了一个稳定而灵活的创作环境，释放了他们的双手。

基参的设置与调整

那么接下来就让小集带大家去探索这神奇的操作具体是什么样的吧。首先，我们先选择一个大模型作为基础，小集这里使用的是名叫Ghostmix的一个混合模型。因为这里重在演示过程，所以提示词我们就简单一点，给一些基础起手式加简单的人物描述提示词。反向提示词我们就复制一些现成的tag。

正向提示词：a girl,white dress,long dress,long hair, black hair,full body, outdoors, (masterpiece, top quality, best quality, official art, beautiful and aesthetic:1.2),full body, outdoors,

反向提示词：(worst quality, low quality:2), monochrome, zombie,overexposure, watermark,text,bad anatomy,bad hand,extra hands,extra fingers,too many fingers,fused fingers,bad arm,distorted arm,extra arms,fused arms,extra legs,missing leg,disembodied leg,extra nipples, detached arm, liquid hand,inverted hand,disembodied limb, small breasts, loli, oversized head,extra body,completely nude, extra navel,easynegative,(hair between eyes),sketch, duplicate, ugly, huge eyes, text, logo, worst face, (bad and mutated hands:1.3), (blurry:2.0), horror, geometry, bad_prompt, (bad hands), (missing fingers), multiple limbs, bad anatomy, (interlocked fingers:1.2), Ugly Fingers, (extra digit and hands and fingers and legs and arms:1.4), ((2girl)), (deformed fingers:1.2), (long fingers:1.2), badhandv4 ,EasyNegative ,By bad artist -neg,nsfw,have somthing with hand,

在这里插入图片描述

接着调整迭代步数、采样方法、图片尺寸以及提示词引导系数这些基本参数。

在这里插入图片描述

接着点击生成，图片效果不错。

人物动作导入

图片效果出来之后，打开Controlnet，将带有示例动作的图片导入，勾选启用、完美像素、允许预览，控制类型选择openpose，预处理器选择带手的openpose，点击爆炸图标查看姿势节点图**（动作节点图可以保存，方便以后使用）**。引导终止时机的话大家根据实际生成效果进行调节，我这里给的是0.92最合适，引导终止时机系数越大表示过程干预度越长。

在这里插入图片描述

调整完之后我们点击生成，我们点击生成，下面是小集根据上述操作流程跑出的图。可以看出图片中的人物动作和示例图片中一样。

在这里插入图片描述

最终效果

通过Controlnet的openpose我们实现了图片生成人物动作的完美控制。下面是小集使用不同的模型和动作生成的图片，让我们看一下效果。

原图：

在这里插入图片描述

动作节点图片：

在这里插入图片描述

AI动作图片：

在这里插入图片描述

通过稳定扩散，插画师可以使用示例图片来控制插画的动作和表现。无论是绘制人物的姿势、角度，还是传达特定的情感和氛围，插画师都可以通过示例图片中的动作来指导AI生成对应的插画动作。这使得插画师能够更好地表达自己的创意和想法，同时又能借助AI的辅助快速生成大量作品。

在这个数字化时代，插画艺术正在经历前所未有的革新和变革。稳定扩散通过示例图片控制AI插画动作的技术突破为插画师们打开了新的创作大门，释放了他们的双手。插画师们不再受限于传统的手工绘画技巧，而是可以与AI合作，共同创造出更加惊艳和独特的插画作品。

在未来，我们可以期待这一技术的不断演进和完善，为插画艺术带来更多可能性。无论是新兴的数字插画师还是经验丰富的艺术家，都将从中受益。让我们共同期待，插画艺术的未来会更加多彩，而稳定扩散通过示例图片控制AI插画动作将成为这一变革的重要推动力。

希望这篇文章能够激发你对插画艺术与人工智能融合的思考，并期待你在未来的创作中探索这一新兴领域。今天的分享就到这，关注我们，为大家更新跟更多AI干货！

文章使用的AI工具SD整合包、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了，无需自行查找，有需要的小伙伴文末扫码自行获取。

写在最后

全套SD实用插件已打包，有需要的小伙伴可以自取，无偿分享。
在这里插入图片描述

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。

在这里插入图片描述