AR + 机器学习：用MediaPipe实现跨平台实时运动追踪

文 / 软件工程实习生 Vikram Sharma；资深软件工程师 Jianing Wei；高级软件工程师 Tyler Mullen

增强现实 (AR) 技术带来了有趣且引人入胜的沉浸式用户体验。而对大规模支持 AR 应用来说，无需初始化即可跨设备和平台执行 AR 追踪的能力十分重要。

今天，我们很高兴介绍 MediaPipe 中的实时运动追踪 (Instant Motion Tracking Pipeline) 解决方案。此方案基于 MediaPipe Box Tracking 解决方案。通过使用“实时运动追踪”，您可以轻松将有趣的虚拟 2D 和 3D 内容放置于静态或动态的表面上，从而实现内容与现实世界的无缝交互。这项技术还为 MotionStills AR 提供支持。除了相关的库以外，我们还发布了一个开源 Android 应用，用以展示此解决方案的各项功能。在这个应用中，用户只需轻按相机取景器即可插入虚拟 3D 对象和 GIF 动画，实现对现实环境的增强。

• 实时运动追踪
  https://solutions.mediapipe.dev/instant_motion_tracking

• MediaPipe Box Tracking
  https://google.github.io/mediapipe/solutions/box_tracking.html

• MotionStills AR
  https://ai.googleblog.com/2018/02/the-instant-motion-tracking-behind.html