亚马逊云科技为Crikey AI提供宝贵的技术和市场支持

关键字: [innovate2024, Crikey AI, Video To 3D Animation, Ai Animation Tools, Motion Vector Extraction, Lip Sync Generation, Language Voice Generation]

本文字数: 1700, 阅读完需: 8 分钟

导读

Crikey AI的联合创始人在亚马逊云科技innovate2024活动上展示了他们的AI动画工具公司。在这场演讲中,他们阐述了Crikey AI的基础模型如何实现将视频转换为3D角色动画,包括由Amazon Polly提供支持的多语言口形同步、添加面部表情、手势和背景等功能。演讲重点介绍了Crikey AI如何让用户无需动画技能即可创建动画视频或游戏内容,从而提高教育、游戏、媒体和营销等行业的生产效率。他们还分享了自身从游戏工作室转型为AI动画工具公司的历程,以及参与亚马逊云科技GenerativeAI Accelerator计划的好处。

演讲精华

在不断创新的科技领域中,Crikey AI凭借其在生成式人工智能(GenAI)和亚马逊云科技(Amazon Web Services)方面的领先地位,彻底改变了动画制作的范式。这家人工智能动画工具公司由远见卓识的John V和K. Tiki共同创立,他们打造了一个革命性的基础模型,能够在短短五分钟内将视频转化为引人入胜的3D角色动画。

围绕这一基础模型,Crikey AI开发了一款全面的视频编辑工具,赋予用户为作品注入生命力的能力。该工具可以为角色添加20多种语言的同步语音,确保角色能够跨越语言障碍进行流畅交流。此外,它还允许生成动态场景、背景、面部表情、手势等,最终形成一个沉浸式的动画视频,或可导出至视频游戏或其他应用的FBX文件。

Crikey AI的发展历程见证了坚持与创新的力量。起初,John V和K. Tiki经营着一家小型游戏工作室,但由于团队中只有一名动画师,制作新动画的过程往往需要数周时间,这严重阻碍了他们高效推出游戏的能力。意识到需要一种解决方案,他们着手开发一款人工智能动画工具,不仅能解决自身的困难,还能为那些渴望利用动画力量但缺乏专业技术的人们开辟一个全新市场。

两年前,Crikey AI将业务模式转向专注于开发人工智能动画工具。他们的愿景是让各行各业的个人和组织,包括游戏、媒体、娱乐、体育联盟和教育等领域,都能无缝制作动画内容,无论他们的动画水平如何。这一大胆举措被证明是一个转折点,因为他们被选中加入亚马逊云科技(Amazon Web Services)的GenerativeAI Accelerator计划,这是一次改变了他们业务并拓展视野的转折性经历。

通过参与加速器计划,Crikey AI与行业内知名的公司如Canva和Adobe Express建立了合作伙伴关系,将其AI动画工具整合到这些设计平台中。此外,该公司最近在亚马逊云科技市场上推出了企业产品,进一步巩固了其在市场中的地位,满足了大学、游戏工作室和电影工作室优化和加速创意生产工作流程的需求。

Crikey AI基础模型的核心是一个复杂的训练过程,利用视频数据输入、动画输入和商业许可的视频内容。当用户上传视频时,该模型采用先进的算法识别两足动物角色、附加骨骼结构并提取2D运动矢量,然后将其转置到3D空间,从而实现无缝动画。

作为对其基础模型的补充,Crikey AI在其工具中利用了其他GenAI产品的强大功能。其中一个产品是Amazon Polly,它使用户能够为其动画角色生成AI语音。用户可以编写脚本并从多种语言和口音中进行选择,为其角色带来真实和吸引人的对话。值得注意的是,Crikey AI的自动唇形同步解决方案可以自动调整到所选语言,无需手动调整,从而简化了跨多种语言的动画过程。

Crikey AI的平台完全建立在亚马逊云科技之上,该公司从亚马逊云科技的服务如SageMaker Ground Truth进行数据标注中获益匪浅。最初,团队手动标注其视频数据点,这是一个耗时且劳动密集的过程。然而,通过参与亚马逊云科技GenAI加速器,他们发现了SageMaker Ground Truth,并与该团队合作,高效地标注了其数据,节省了数千小时的工作。

Crikey AI工具的影响远远超出了动画领域,触及了各个领域的个人和企业。一家小型游戏工作室之前手绘动画并制作GIF,现在可以借助Crikey AI的工具制作角色动画、添加对话并以前所未有的速度和效率迭代游戏,这使其能够更快更有效地将游戏推向市场。

在教育领域,教师们已经采用了Crikey AI的工具,创建了引人入胜的课程计划,其中包括说多种语言的动画角色。学生们也利用了这项技术的力量,其中一位学生创建了一个视频简历,其中包括他们自己的动画版本,以一种吸引人和令人难忘的方式展示了自己的资格。

大学的VR实验室也在Crikey AI的工具中找到了巨大的价值,利用它为沉浸式体验和研究项目制作动画角色。一个由博士生组成的团队,虽然他们都不是动画师,但现在可以利用Crikey AI的动画能力为他们的研究构建VR体验,克服了以前阻碍他们进步的障碍。

在一个非凡的例子中,一位教授西非舞蹈的舞蹈教师已经采用动画作为她课堂上的新教学媒介,使用Crikey AI的工具以一种视觉吸引人和引人入胜的方式将她的课程活灵活现。这种创新方法为有效的教学和学习开辟了新的途径,超越了传统的方法。

Crikey AI面向两个不同的领域:消费者领域和企业领域。在消费者领域,个人可以通过Crikey AI的网站访问该工具,网站上提供了强大的免费版本和订阅模式。这使得教师、学生、营销团队和社交媒体专业人士能够利用动画的力量,而无需广泛的技术专长,从而实现了动画内容创作的民主化。

在企业领域,Crikey AI的目标是寻求优化和加速创意生产工作流程的大学、游戏工作室和电影工作室。一些企业客户将Crikey AI的工具视为一种低成本的无标记运动捕捉解决方案,使他们能够快速、经济高效地将视频素材(如体育赛事素材)转换为高质量的动画。这种方法不仅节省了时间和资源,而且为这些行业的粉丝互动和内容创作开辟了新的可能性。

展望未来,Crikey AI的联合创始人设想了一个未来,他们的工具将赋予任何人制作会说话的3D角色动画的能力,无缝地将其工作流程融入每一个创意生产流程,从媒体和娱乐到游戏和体育。为了实现这一目标,他们不断用新的数据点重新训练其模型,确保其动画始终处于技术进步的前沿,并准确地反映人类运动和表情的细微差别。

然而,他们的关注点不仅仅局限于工具的技术方面。Crikey AI同样致力于提升用户体验,使其平台对各种技能水平的个人都直观且易于使用。其目标是让任何人,无论技术背景如何,都能在使用该工具60秒内创建出动画体验,真正实现了动画世界的民主化,在前所未有的规模上释放创造力。

随着Crikey AI不断推动AI动画领域的发展,其联合创始人为其他寻求通过生成式AI创新的人提供了宝贵建议。他们强调坚持不懈和实验的重要性,鼓励他人拥抱尝试的精神,即使没有明确的先例。他们自己的旅程证明了转变和适应市场需求的力量,这是一个在不断发展的技术领域中深深引起共鸣的教训。

此外,联合创始人强调参与亚马逊云科技GenAI加速器等项目的巨大价值,该项目为他们的小团队提供了宝贵的资源、指导和支持。他们强烈建议从一开始就构建在亚马逊云科技之上,因为亚马逊云科技团队一直是指导和协助的坚定力量,在整个创业旅程中提供了宝贵的技术和市场营销专业知识。

总而言之,Crikey AI展现了创新、坚韧不拔以及高效利用尖端技术如何能够彻底革新行业,赋予个人和企业前所未有的力量。他们革命性的AI动画工具为创意表达开辟了全新大门,使各行各业的个人和组织能够以前所未有的轻松和高效将想象化为现实。随着Crikey AI不断推进可能性的边界,他们的旅程将激励所有那些希望驾驭生成式AI和亚马逊云科技变革力量的人,为想象力无边无际的未来铺平道路。

下面是一些演讲现场的精彩瞬间：

Crikey AI公司创始人在演讲中分享了该公司的创业历程。

凭借AI动画工具,各行业均可自主制作动画内容,涵盖游戏、媒体娱乐、体育联盟以及教育等领域。

通过自主训练的视频到动画基础模型,可从视频中提取二足行走角色的动作矢量,并将其转换为三维动画。

借助Crikey AI工具,用户可轻松制作多语种动画内容,无需重新进行口型同步,节省了大量时间。

通过与Amazon SageMaker Ground Truth合作,Crikey能够高效地标注视频数据,为训练基础模型节省了数千小时的时间。

在创新者2024大会上,一家初创公司的代表分享了他们如何从Amazon Web Services GenAI加速器项目中获益,加速了企业产品的发展,并对亚马逊云科技团队在技术和市场推广方面的大力支持和指导表示感谢。

总结

Crikey AI是一家由John V和K. Tiki共同创立的初创公司,他们开发了一种创新的AI动画工具,能够在短短5分钟内将视频镜头转换为3D角色动画。该公司的基础模型经过视频和动画数据训练,可从视频中提取运动矢量,并将其转换到3D空间,从而实现制作动画视频或游戏资产。

创始人们将业务从游戏工作室转向专注于AI动画工具,意识到非动画师创作动画内容在教育、营销和娱乐等各个行业的巨大潜力。他们的旅程得到了参与亚马逊云科技GenerativeAI Accelerator计划的加速,该计划提供了宝贵的资源和指导,使他们能够在亚马逊云科技Marketplace上推出企业产品,并与Canva和Adobe Express等公司建立合作伙伴关系。

Crikey AI的愿景是让任何人,无论技能水平如何,都能制作出会说话的3D角色动画,并将其工作流程融入媒体、游戏和体育等创意生产流程中。创始人鼓励其他人拥抱实验精神,尝试新工具和新方法,并利用亚马逊云科技GenAI Accelerator等资源来加速他们的GenerativeAI创新。建立在亚马逊云科技之上对该公司的成功至关重要,提供了宝贵的技术和市场支持,对这个小团队来说意义重大。

亚马逊云科技（Amazon Web Services）是全球云计算的开创者和引领者。提供200多类广泛而深入的云服务，服务全球245个国家和地区的数百万客户。亚马逊云科技致力于成为企业构建和应用生成式AI的首选，通过生成式AI技术栈，提供用于模型训练和推理的基础设施服务、构建生成式AI应用的大模型等工具、以及开箱即用的生成式AI应用。深耕本地、链接全球 – 在中国，亚马逊云科技通过安全、稳定、可信赖的云服务，助力中国企业加速数字化转型和创新，并深度参与全球化市场。