漫画是我们在日常生活中常用的消遣方式之一,随着AI技术的发展,也催生出很多AI漫画工具,但是可惜的是,市面上绝大部分的AI只能创作出单帧的漫画,根本做不到拥有连贯的剧情和统一的人物····
但今天,给大家介绍的这款AI绘画工具——Autostudio,它可以根据你的描述生成连续的漫画!快来了解一下~
1、AutoStudio 是什么?
AutoStudio 是一个创新的多轮交互式图像生成框架,由中山大学深圳校区和联想研究院的研究人员共同开发。该框架无需训练即可使用,它通过结合大型语言模型和稳定扩散(Stable Diffusion)技术,实现了与用户进行多轮对话并生成一系列连贯、高质量的图像。
简单来说,它就是一个能听懂你话的“AI 画师”,你只需要用简单的语言描述你想要的画面,它就能自动生成高质量的图像,而且还能根据你的指令不断修改,直到你满意为止。
2、核心技术
AutoStudio它利用三个基于大型语言模型的Agent和一个基于SD的Agent来生成高质量图像。
这些代理包括主题管理器、布局生成器、监督者和绘图器。AutoStudio还引入了平行UNet和主题初始化生成法,提高了生成的图像在多轮交互中的一致性,因此无论你如何修改,它都能保证画面风格、人物、场景的一致性!
3、适用场景
故事创作辅助:帮助作者以图像形式展现故事情节。
漫画/绘本制作:生成连贯的漫画或绘本页面。
角色设计:为游戏或动画设计一致的角色形象。
广告和营销:快速生成吸引消费者的视觉内容。
教育工具:辅助教学,以图像形式解释复杂概念。
虚拟环境构建:为虚拟现实或增强现实应用创建视觉元素。
4、项目地址
官方项目主页:
https://howe183.github.io/AutoStudio.io/
GitHub源码库:
https://github.com/donahowe/AutoStudio
arXiv研究论文:
https://arxiv.org/abs/2406.01388
*西安觉醒元宇宙AI,是专注线上AI培训、AI绘画辅导、AI开发服务的专业教育平台!