ToonCrafter——自动生成动画中间帧与动画上色

1、引言

动画制作对许多人来说都是一项专业且复杂的工作，需要学习专门的知识、掌握特定的工具，并投入大量的时间和精力才能获得成果。不过，最近推出的一款 AI 动画制作工具 ToonCrafter 有望改变这一现状。

它只需两张图像即可生成连贯流畅的动画片段，还能自动为动画上色，不仅能帮助专业动画人员提高工作效率，也能让新手轻松制作出稳定的动画效果。下面将详细介绍 ToonCrafter 的特点和使用方法。

2、ToonCrafter 简介

ToonCrafter，一款创新的开源动画插帧工具，以其先进的图像到视频扩散模型，为卡通艺术创作带来革命性的变革。仅需两张关键帧——起始与结束画面，ToonCrafter便能巧妙地绘制出两者之间的流畅过渡，创造出一系列生动的动画帧。

该工具的官方演示令人印象深刻，展示了其在生成动画帧方面的卓越能力。无论是头发随风飘扬、物体自然移动，还是光影的细腻变化，ToonCrafter都能以极高的流畅度呈现。它甚至能够在处理复杂场景和部分遮挡物体时，保持动画的完美效果。

与其他AI视频生成工具相比，ToonCrafter以其独特的首尾帧控制技术，确保动态效果的稳定性，有效避免了画面的扭曲和变形。这使得ToonCrafter成为动画制作领域的一个可靠选择，为创作者提供了一个强大的工具，以实现他们的视觉创意。

除了通过卡通图像生成动画，ToonCrafter 还支持对草图添加动画。例如，可以生成纯草图的物体膨胀或移动效果，整体动态非常连贯，比纯手工逐帧绘制高效得多。

ToonCrafter 还能根据彩色参考图像，对线稿动画进行自动上色。上色后的动画在色彩风格和色彩分布上与参考图像高度一致，这一步骤也能节省大量人工。

此外，ToonCrafter 还支持仅通过稀疏草图来引导动画生成。如下图所示，虽然给出的参考草图只有几帧断续的画面，但最终生成的动画依然整体连贯流畅。这表明 ToonCrafter 的插帧技术非常强大，可以有效简化动画制作流程。

3、在线体验

Huggingface Demo
ToonCrafter作为开源工具，其代码和模型权重的公开，迅速激发了社区的活力。不久之后，它便在Huggingface和Replicate上实现了线上部署，让任何人都能免费体验这款AI动画工具的神奇效果。

在Huggingface平台上，ToonCrafter允许用户通过上传起始和结束帧来生成动画。用户可以上传自己的图像（建议使用横幅格式），并在提示框中详细描述所需的画面内容和动态效果，随后点击“生成”按钮即可启动动画制作流程。例如，通过使用"midjourney"功能，可以生成如小王子这样的卡通图像；利用"vary region"功能，还能对特定区域如披风进行细节处理，创造出一段流畅且吸引人的动画。

ToonCrafter的易用性和高效性，大大降低了动画制作的门槛，使得没有专业动画制作背景的普通人也能轻松创作出稳定而生动的动画效果。这不仅展示了AI技术在艺术创作领域的潜力，也为动画爱好者和创作者提供了一个强大的工具，以实现他们的创意构想。