随着Apple Vision Pro的发布,增强现实(AR)应用的开发迎来了新的机遇与挑战。在一次开发者社区的会议上,一名专注于图像和视频检测、分割及关键姿态估计的开发者分享了他在Vision Pro上开发AR应用的经历及想法,引起了广泛的讨论。
AR应用理念:创新与实践
这名开发者尝试了几种富有创意的AR应用理念,如音乐类应用中的吉他/钢琴音符查找器、虚拟吉他调音器、虚拟节拍器和AI车库乐队,以及家用工具类应用中的自动购物清单、对象计时器、真空吸尘器追踪器、虚拟家庭安保监控系统和气流可视化工具等。这些应用充分利用了Vision Pro的AR技术,为用户带来了全新的体验。
AR应用局限性:挑战与期待
然而,在开发过程中,他也遇到了不少局限性。其中,非通用对象追踪是一个显著的问题。当前Vision Pro只能追踪特定型号或外观相似的对象,无法实现对一般物品的广泛追踪。此外,无法访问摄像头或用户看到的组合视频也限制了应用程序与环境互动的能力。苹果允许的AR应用类型也相对有限,主要集中在新奇类应用、完全自包含的应用和企业应用上。
开发者的困惑与建议:寻求突破与共鸣
面对这些挑战,这名开发者提出了一些困惑和建议。他想知道是否有其他开发者已经成功开发了基于动作/姿态检测的应用,并寻求替代方法。同时,他也对在Vision Pro上开发企业软件并向现有企