随着Apple Vision Pro的发布,增强现实(AR)应用的开发迎来了新的机遇与挑战。在一次开发者社区的会议上,一名专注于图像和视频检测、分割及关键姿态估计的开发者分享了他在Vision Pro上开发AR应用的经历及想法,引起了广泛的讨论。
AR应用理念:创新与实践
这名开发者尝试了几种富有创意的AR应用理念,如音乐类应用中的吉他/钢琴音符查找器、虚拟吉他调音器、虚拟节拍器和AI车库乐队,以及家用工具类应用中的自动购物清单、对象计时器、真空吸尘器追踪器、虚拟家庭安保监控系统和气流可视化工具等。这些应用充分利用了Vision Pro的AR技术,为用户带来了全新的体验。
AR应用局限性:挑战与期待
然而,在开发过程中,他也遇到了不少局限性。其中,非通用对象追踪是一个显著的问题。当前Vision Pro只能追踪特定型号或外观相似的对象,无法实现对一般物品的广泛追踪。此外,无法访问摄像头或用户看到的组合视频也限制了应用程序与环境互动的能力。苹果允许的AR应用类型也相对有限,主要集中在新奇类应用、完全自包含的应用和企业应用上。
开发者的困惑与建议:寻求突破与共鸣
面对这些挑战,这名开发者提出了一些困惑和建议。他想知道是否有其他开发者已经成功开发了基于动作/姿态检测的应用,并寻求替代方法。同时,他也对在Vision Pro上开发企业软件并向现有企业销售的可行性表示了关注。考虑到设备的高成本,他担心市场需求是否足够。此外,他还希望了解是否有其他开发者正在开发非游戏类或非媒体播放类的AR应用。
针对用户,他也提出了一些建议。他希望了解用户在日常生活中希望看到什么样的应用,以及在使用头显时哪些信息或数据会对用户有帮助。同时,他也对用户最常使用的智能家居设备以及哪些集成会对用户更有帮助表示了关注。
其他开发者的反馈:共谋发展与未来
其他开发者也对这名开发者的分享给予了积极的反馈。他们指出,许多限制是苹果为保护用户隐私而设定的,开发者无法访问摄像头数据可能是为了防止数据被滥用。虽然苹果可能会在未来开放更多的API,但短期内不太可能。同时,他们也认为Vision Pro并非针对普通消费者的AR头显,而更多的是针对企业用户。当前的限制可能会随着Vision OS的更新逐渐放开,但这可能需要几年时间。
面对这些挑战和机遇,开发者们纷纷表示将积极应对。他们建议考虑如何在现有技术下开发可行的应用,同时也要向苹果提交需求反馈,以推动未来功能的开发。他们相信,在共同努力下,Vision Pro上的AR应用将会迎来更加美好的发展前景。