尽管 Meta 的 Quest 头显一直以来都依赖摄像头来追踪头显位置、控制器状态以及用户周围环境,但开发者却从未拥有同等水平的相机访问权限。今年早些时候,Meta 首次允许开发者在私有项目中尝试直接访问头显摄像头功能;而从本周起,开发者现在可以公开发布使用这一新功能的应用。
随着本周发布的 Passthrough Camera API(直通摄像头应用编程接口)更新,Quest 3 和 Quest 3S 的开发者现在可以将能够直接调用前置摄像头的 App 发布到 Horizon 商店。这意味着第三方应用将有能力“看见”用户所看到的世界,并基于此进行理解和交互。
例如,开发者可以为应用添加计算机视觉功能,用于识别和追踪场景中的物体或人物,或者构建用户环境的地图,以实现更高级的分析与互动体验。
长期以来,由于 Meta 对头显硬件访问权限的限制,这类功能一直无法实现。尽管智能手机平台早已广泛向开发者开放了计算机视觉能力,但 Meta 在这方面一直持谨慎态度,这显然与其对隐私保护的关注有关——尤其是在公司过去曾多次卷入隐私争议的背景下。
在此之前,第三方应用虽然也能获取一些关于用户环境的信息,比如房间形状和大致物体布局,但这些数据都是由系统经过处理后提供,App 本身无法直接访问摄像头画面。这种方式让开发者可以创建一定程度上具备空间感知能力的混合现实应用,但也导致一些特定需求难以实现,例如精确追踪用户手中持有的某个物体。
去年,Meta 宣布将逐步开放对摄像头的直接访问权限。今年三月,公司开始向开发者提供该功能的实验性版本,允许他们开发能调用摄像头的应用程序。不过直到现在,这些应用才被允许对外发布、面向公众使用。
Meta 同时公布了开发者可在 Quest 3 和 Quest 3S 上访问的摄像头技术规格:
图像采集延迟:40–60毫秒
GPU 占用率:每个摄像头流约 1–2%
内存占用:约 45MB
数据帧率:30Hz
最大分辨率:1280×960
内部数据格式:YUV420
Meta 表示,开发者在 Quest 平台上对摄像头数据的使用需遵守其《开发者数据使用政策》(Developer Data Use Policy),其中包括“禁止的数据使用行为”条款。根据该政策,开发者不得利用摄像头数据进行、协助或提供监控工具,也不得用于唯一标识设备或用户(除非政策中有特别许可)。
此次摄像头权限的全面开放,标志着 Meta 在推动 VR/AR 应用边界方面迈出了重要一步。它不仅为开发者解锁了更多创作自由,也为未来的混合现实体验打开了新的可能性。与此同时,Meta 也在努力在创新与隐私保护之间取得平衡。
VR52网成立于2015年,平台提供VR头显、AR眼镜、配件外设、厂商、测评、行业资讯、游戏与应用、展会活动等。