Minecraft 的元宇宙进化 ？MineDojo 实现操作角色探索程序生成的 3D 世界

火爆的 AIGC 展示了人工智能在内容生成领域无限的潜力。在交互式内容创作，如游戏领域，AI 有哪些惊艳的表现吗？

Mixlab

小杜

推荐 MineDojo。该模型实现了AI 代理的游戏角色在 Minecraft 中根据输入指令来探索程序生成的 3D 世界，包括实现在不同地形地图中漫游、材料开采、工艺工具使用、建造指定结构和多种开放式世界探索活动。 

MineDojo

MineDojo 是一个基于 Minecraft 游戏以及其拥有1.4亿用户的游戏数据库构建的新框架，用于具体游戏代理任务研究。MineDojo 拥有一个包含1000 多个开放式语言提示任务的模拟套件，支持AI角色实现多样的游戏指令。

带我们直接看效果？看看究竟有多神奇～

Mixlab

小杜

MineDojo 可支持实现的游戏任务类型非常多，基本能准确完成输入的任务，非常惊艳，几乎让我产生了看游戏主播直播的错觉！

#01 多样的游戏工具使用任务

用栅栏围住美洲驼

用盾牌挡伤害

#02 探索不同的地形地图

建造一个Nether Portal 并进入

穿越不同地形

#03 复杂度更高的开放式任务

对抗安德龙

舀一桶熔岩

如果不告诉是AI，我肯定以为是真人操作......

Mixlab

小杜

hh ，MineDojo 除了带给我对 AI 神奇表现的惊讶，也让我产生了未来元宇宙游戏特色功能的期待～比如雇佣智能NPC帮我实现困难的游戏任务，甚至直接拥有一位智能队友，全程协作通关...... 

MineDojo 是怎样实现如此神奇的功能的呢？它又有什么局限性？

Mixlab

小杜

 MineDojo 从拥有超过 1 亿活跃玩家以及巨大数据财富的 Minecraft 中自动收集的海量数据库。AI 可以从这个知识宝库中学习，以让AI代理角色获得可命令的认知见解、获得多样化的技能、制定复杂的策略并发现有趣的追求目标。

但这也从侧面反映  MineDojo 的局限性，如果更换一款数据量没有 Minecraft 庞大的游戏，那么AI就无法实现高精度的角色智能化操作，距离通用 AI 游戏角色代理模型还有非常远的距离～

MineDojo 通过包含视频、百科词条以及社交贴子数据量巨大的训练数据集来训练 AI角色

MineDojo 实现了角色交互智能，如果再加上3D模型-真实世界生成功能，我的世界 岂不就真正完成元宇宙进化了？

Mixlab

小杜

 倒还真有这个模型，GANcraft 实现了在 Minecraft 中生成大型 3D 方块世界的逼真图像！

输入块状世界模型-输出真实世界渲染

GANcraft，是一种无监督的神经渲染框架，研究者将语义块世界作为输入，其中每个块都被分配了一个标签，例如泥土、草、树、沙子或水，最后从任意视点渲染视图，生成一致的逼真世界图像。

我看到了元宇宙游戏理想的标准之一——自助式真实世界渲染 + 智能NPC

Mixlab

小杜

 wow，这样的元宇宙游戏才值得期待！

MineDojo 项目地址：
minedojo.org

GANcraft 项目地址：

nvlabs.github.io/GANcraft

opus

欢迎留言讨论，参与 元宇宙 话题的共创共建～

点击阅读原文加入MixDAO超级社群，抽奖

添加请备注
元宇宙

💡