Meta 最新发布的 XR Core SDK 74.0 版本为开发人员提供了对 Meta Quest 3 的 RGB 摄像头的访问权限,这将推动创新的混合现实(MR)功能和应用的开发。这一新功能被称为直通摄像头 API(PCA),为开发者带来了更多的可能性。
PCA 提供了对前置 RGB 摄像头的访问权限,允许开发人员提高其应用程序的生产质量(如灯光和效果),并驱动机器学习(ML)和计算机视觉(CV)管道,例如对象识别。虽然 PCA 目前处于试验阶段,开发者可以开始使用它来创建新的应用和功能,但尚不能将其发布到 Horizon Store 或集成到现有应用中。这是 Meta 推出新 API 的标准做法,预计在未来几个月内全面推出。
支持设备:PCA 仅支持 Meta Quest 3 和 3S。
性能参数:每个摄像头支持 30 FPS,最大分辨率为 1,280 x 960 像素,延迟在 40 到 60 毫秒之间。
用户权限:首次启动应用程序时,用户需要授予摄像头访问权限,类似于麦克风访问权限。
尽管第一批具有 PCA 功能的应用程序进入 Horizon Store 还需时日,但在未来几周和几个月内,您可以在 Sidequest 和 GitHub 等平台上看到许多有趣的示例。
Meta 已经在 GitHub 上发布了一系列 Unity 示例,展示了如何利用 PCA 实现二维码跟踪、对象识别以及集成 OpenAI 视觉模型进行实时图像分析。此外,Meta 的 Roberto Coviello 使用 QuestCameraKit 提供了五个额外的示例,进一步扩展了 PCA 的应用场景。
在今天开幕的游戏开发者大会(GDC)上,Niantic、Resolution Games 和 Creature 工作室将展示他们使用 PCA 所取得的成果。这些工作室已经提前获得了 API 访问权限,并准备分享他们的创新应用案例。
通过引入直通摄像头 API,Meta 为开发人员提供了强大的工具,以创建更具沉浸感和互动性的混合现实体验。尽管 PCA 尚处于试验阶段,但它已经展示了巨大的潜力。随着技术的不断成熟和完善,我们期待看到更多令人兴奋的应用程序出现在市场上。无论是增强现有应用的功能,还是创造全新的 MR 体验,PCA 都将为开发者带来无限可能。
VR52网成立于2015年,平台提供VR头显、AR眼镜、配件外设、厂商、测评、行业资讯、游戏与应用、展会活动等。