Meta明年年初将推出摄像头透视 API。
在今天的 Connect 2024 上出人意料地宣布,它将在明年通过新的 API 让开发人员访问 Quest 头显的透视摄像头。
这将实现各种尖端的 MR 体验,包括跟踪的对象、AI 应用程序、AR的叠加、场景理解等等。
虽然 Meta Quest 3 和 Apple Vision Pro 等混合现实头戴显示设备使用摄像头来让您看到现实世界,但如今只有系统和某些第一方应用程序才能真正获得对摄像头的原始访问权限。第三方开发者可以使用相机直通作为背景,但他们的应用实际上无法看到这种直通。相反,它们会获得更高级别的数据,例如手部和身体骨骼坐标、带有家具边界框的环境 3D 网格以及有限的对象跟踪功能。这意味着他们无法运行自己的计算机视觉模型,这严重限制了这些头戴式设备的增强能力。
在 visionOS 2 中,Apple 现在允许企业公司对 Vision Pro 的直通摄像头进行原始访问,用于非公开的内部应用程序,但这需要 Apple 的特殊许可,并且仅限于“仅在商业环境中”。
来源:uploadvr