依旧照例先感谢前辈们的慷慨分享
今天学习的是这篇文章↓
原文:转自公主号“具身智能之心”
—《具身智能有哪些细分研究方向?综述总结!》
这篇综述是“Aligning Cyber Space with Physical World:A Comprehensive Survey on Embodied AI”
https://github.com/HCPLab-SYSU/Embodied_AI_Paper_List
本综述涵盖了代表性的具身机器人、仿真引擎和四个主要研究任务:具身感知、具身交互、具身代理和仿真真实机器人控制。
一、具身机器人
Fixed-base Robots
如图4(a)所示,固定基座机器人因其紧凑性和高精度操作而广泛应用于实验室自动化、教育培训和工业制造。这些机器人具有坚固的底座和结构,可确保操作过程中的稳定性和高精度。配备高精度传感器和执行器,可实现微米级精度,使其适用于需要高精度和可重复性的任务。
Wheeled Robots and Tracked Robots
对于移动机器人来说,它们可以面对更复杂和多样化的应用场景。如图4(b)所示,轮式机器人以其高效的机动性而闻名,广泛应用于物流、仓储和安全检查。轮式机器人的优点包括结构简单、成本相对较低、能源效率高、在平面上的快速移动能力。这些机器人通常配备激光雷达和摄像头等高精度传感器,实现自主导航和环境感知,使其在自动化仓库管理和检查任务中非常有效。
相比之下,履带式机器人具有强大的越野能力和高机动性,在农业、建筑和灾难恢复方面显示出巨大的潜力,如图4(c)所示。轨道系统提供了更大的地面接触面积,分散了机器人的重量,降低了在泥泞和沙地等软地形中沉没的风险。
Quadruped Robots
四足机器人以其稳定性和适应性而闻名,非常适合复杂的地形探索、救援任务和军事应用。受四足动物的启发,这些机器人可以在不平坦的表面上保持平衡和机动性,如图4(d)所示。多关节设计使它们能够模仿生物运动,实现复杂的步态和姿势调整。高可调性使机器人能够自动适应不断变化的地形,提高机动性和稳定性。
Humanoid Robots
人形机器人以其类似人类的形态而闻名,在服务业、医疗保健和协作环境等领域越来越普遍。这些机器人可以模仿人类的动作和行为模式,提供个性化的服务和支持。如图4(e)所示,它们灵巧的手设计使它们能够执行复杂而复杂的任务,使其有别于其他类型的机器人。
Biomimetic Robots
不同的仿生机器人通过仿真自然生物的有效运动和功能,在复杂和动态的环境中执行任务。通过仿真生物具身的形态和运动机制,这些机器人在医疗保健、环境监测和生物研究等领域显示出巨大的潜力。如图4(f)所示。
二、具身仿真
General Simulator
真实环境中存在的物理相互作用和动态变化是不可替代的。然而,在物理世界中部署具身模型通常会带来高昂的成本,并面临诸多挑战。具身人工智能的最终目标是将发现从虚拟环境转移到现实世界的应用程序中。研究人员可以选择最适合他们需求的仿真引擎来帮助他们的研究。通用仿真引擎提供了一个紧密模拟物理世界的虚拟环境,允许算法开发和模型训练,这提供了显著的成本、时间和安全优势。
- Isaac
- Sim
- Gazebo
- PyBullet
表二列出了10种用途仿真引擎的关键特征和主要应用场景。研究人员可以根据自己的具体研究需求选择最合适的仿真引擎,从而加快嵌入式人工智能技术的开发和应用。图5显示了通用仿真引擎的可视化效果。
Real-Scene Based Simulators
在家庭活动中实现普遍的具身代理一直是具身人工智能研究领域的主要焦点。这些具身代理需要深入了解人类的日常生活,并在室内环境中执行复杂的具身任务,如导航和交互。为了满足这些复杂任务的需求,模拟环境需要尽可能接近现实世界,这对仿真引擎的复杂性和真实性提出了很高的要求。这导致了基于现实世界环境的仿真引擎的创建。这些仿真引擎主要从现实世界收集数据,创建逼真的3D资产,并使用UE5和Unity等3D游戏引擎构建场景。丰富而逼真的场景使基于现实世界环境的仿真引擎成为家庭活动中具身人工智能研究的首选。
- AI2-THOR
- Matterport 3D
- Virtualhome
- Habitat
- SAPIEN
- iGibson
- TDW
表三总结了基于上述真实场景的所有模拟器。Sapien因其设计而脱颖而出,专门为模拟与门、橱柜和抽屉等关节目标的交互而量身定制。VirtualHome以其独特的环境图而闻名,它促进了基于环境自然语言描述的高级体现规划。虽然AI2Thor提供了丰富的交互式场景,但这些交互与VirtualHome中的交互类似,都是基于脚本的,缺乏真正的物理交互。这种设计足以满足不需要细粒度交互的具体任务。iGibson和TDW都提供了精细的压花控制和高度模拟的物理交互。iGibson擅长提供丰富而逼真的大规模场景,使其适用于复杂和长期的移动操作