StoryAdapter简介:下载链接在文末
故事可视化是基于叙事生成相干图像的任务,随着文本到图像模型的出现,尤其是扩散模型的出现。但是,保持语义一致性,产生高质量的细粒度相互作用,并确保计算可行性仍然具有挑战性,尤其是在长篇小说可视化中(即最多100帧)。个人使用总结,StoryAdapter非常完美的软件,自媒体创作人的必备神器,小说、故事生成漫画或动画,制作分镜头图片在用图片转动画ai制作动画,人物一致性非常的棒,后面有官方的效果展示,为了小白使用方便,提供整合包下载,解压即用,支持中文提示词。
官方地址:GitHub - UCSC-VLAA/story-adapter: A Training-free Iterative Framework for Long Story Visualization
本文图片以及信息来自于官方
故事适应框架。故事适应器首先仅根据故事的文本提示来可视化每个图像,并将所有结果用作下一个的参考图像。在这样的传递中,对于每个图像可视化的迭代,GRCA将通过跨注意过程中所有参考图像的信息流汇总。此迭代的所有结果将用作参考图像,以指导下一个迭代中故事可视化的动态更新,保持所有人物的一致性。
效果展示
长篇小说故事分镜头
整合包解压缩,先运行检测运行环境.bat,然后在运行启动.bat自动打开浏览器界面,(8g显存运行,推荐越大越好,速度会很快),注意目录无中文。