
NVIDIA 宣布 XR AI 平台正式进入公开测试阶段,为开发者提供一套构建空间感知多模态 AI 智能体的工具库,目标平台覆盖AR眼镜和XR设备。
该平台将 XR 设备的输入信号与 AI 模型、企业数据、工具链及加速计算打通,使智能体能够"在工作流程中感知、推理和执行"。NVIDIA 表示,XR AI 简化了多模态感知、企业知识检索、推理模型和智能体编排的集成过程,为开发者在企业级 XR 应用中构建或接入技能与工具提供了底层基座。
平台整合了四项核心能力:
真实世界数据采集——来自 AR 和 XR 设备的视频、音频、深度、位姿及传感器数据。
专用工具与服务——NVIDIA Metropolis 和 VSS 负责视觉 AI 与视频理解,NVIDIA NeMo Retriever 负责企业知识检索与检索增强生成(RAG)。
AI 模型支持——涵盖 NVIDIA Nemotron 推理模型、NVIDIA Cosmos Reason 及其他兼容的基础模型。
智能体编排与运行时服务——帮助开发者将应用从原型推向生产环境。
此外,平台还支持工具调用、推理工作流,以及跨云端、数据中心和边缘环境的部署。NVIDIA 表示,这些能力组合在一起,使智能体能够理解周围环境、调用企业知识、对任务进行推理,并实时提供上下文辅助。
NVIDIA 同时披露了多家正在使用或探索 XR AI 的企业与科研机构,覆盖工业、科研、医疗、设计和内容制作等领域。
西门子正在探索如何利用 NVIDIA XR AI 和 NVIDIA DGX Spark,帮助工厂工程师查找维护信息、排查故障、核验工作并记录车间现场情况。佩戴轻量级眼镜的工程师可以直接向 AI 智能体提问,获取实时指导——系统将工业系统、数字孪生和自动化工作流串联在一起。
AutoBio 旗下公司 Rana 正在 NVIDIA XR AI 上推出 LabOS 系统,将空间智能引入科研工作流。LabOS 为复杂实验流程提供实时、免手操作的引导,首批应用场景为干细胞疗法和基因编辑研究。该平台兼容 Meta、Rokid 和 VITURE 的智能眼镜,帮助研究人员识别正确的样本和 CRISPR 基因编辑工具、引导实验步骤,并生成结构化、可复现的实验记录。VITURE 还将 NVIDIA XR AI 集成到一款可穿戴界面中,为工作人员提供免手操作的场景感知和任务引导。
匹兹堡大学医学中心(UPMC)Surreality Lab 展示了一套运行在 NVIDIA XR AI 和 NVIDIA DGX Station 上的流水线,旨在帮助手术团队查找信息、引导注意力,同时不给外科医生增加视觉干扰。据 NVIDIA 介绍,系统能够识别医生视野中不应被遮挡的区域,在保持医生对手术和患者专注度的前提下呈现有用上下文。
在汽车设计领域,Innoactive 使用 NVIDIA DGX Spark 系统,展示企业如何在沉浸式工作流中采集信息,涵盖设计评审、产品展厅和数字孪生场景。Atlantic Studios 则将 NVIDIA XR AI 应用于泰坦尼克号的沉浸式扫描项目,用户可通过语音指令探索沉船、定位兴趣点并获取相关背景信息。

VR52网成立于2015年,平台提供VR头显、AR眼镜、配件外设、厂商、测评、行业资讯、游戏与应用、展会活动等。