NVIDIA宣布XRAI平台正式进入公开测试阶段,为开发者提供一套构建空间感知多模态AI智能体的工具库,目标平台覆盖AR眼镜和XR设备。该平台将XR设备的输入信号与AI模型、企业数据、工具链及加速计算打通,使智能体能够"在工作流程中感知、推理和执行"。NVIDIA表示,XRAI简化了多模态感知、企业知识检索、推理模型和智能体编排的集成过程,为开发者在企业级XR应用中构建或接入技能与工具提供了底层基座。四大核心能力:从数据采集到生产部署平台整合了四项核心能力:真实世界数据采集--来自AR和XR设备的视频、音频、深度、位姿及传感器数据。专用工具与服务--NVIDIAMetropolis和VSS负责视觉AI与视频理解,NVIDIANeMoRetriever负责企业知识检索与检索增强生成(RAG)。AI模型支持--涵盖NVIDIANemotron推理模型、NVIDIACosmosReason及其他兼容的基础模型。智能体编排与运行时服务--帮助开发者将应用从原型推向生产环境。此外,平台还支持工具调用、推理工作流,以及跨云端、数据中心和边缘环境的部署。NVIDIA表示,这些能力组合在一起,使智能体能够理解周围环境、调用企业知识、对任务进行推理,并实时提供上下文辅助。已经落地:五个行业的真实用例NVIDIA同时披露了多家正在使用或探索XRAI的企业与科研机构,覆盖工业、科研、医疗、设计和内容制作等领域。工厂维护:西门子让工程师戴着眼镜查故障西门子正在探索如何利用NVIDIAXRAI和NVIDIADGXSpark,帮助工厂工程师查找维护信息、排查故障、核验工作并记录车间现场情况。佩戴轻量级眼镜的工程师可以直接向AI智能体提问,获取实时指导--系统将工业系统、数字孪生和自动化工作流串联在一起。科研免手操作:干细胞与基因编辑实验中的空间智能AutoBio旗下公司Rana正在NVIDIAXRAI上推出LabOS系统,将空间智能引入科研工作流。LabOS为复杂实验流程提供实时、免手操作的引导,首批应用场景为干细胞疗法和基因编辑研究。该平台兼容Meta、Rokid和VITURE的智能眼镜,帮助研究人员识别正确的样本和CRISPR基因编辑工具、引导实验步骤,并生成结构化、可复现的实验记录。VITURE还将NVIDIAXRAI集成到一款可穿戴界面中,为工作人员提供免手操作的场景感知和任务引导。手术室里的上下文助手:不遮挡医生视线的前提下surfacing信息匹兹堡大学医学中心(UPMC)SurrealityLab展示了一套运行在NVIDIAXRAI和NVIDIADGXStation上的流水线,旨在帮助手术团队查找信息、引导注意力,同时不给外科医生增加视觉干扰。据NVIDIA介绍,系统能够识别医生视野中不应被遮挡的区域,在保持医生对手术和患者专注度的前提下呈现有用上下文。设计评审与沉浸内容:从汽车到泰坦尼克号在汽车设计领域,Innoactive使用NVIDIADGXSpark系统,展示企业如何在沉浸式工作流中采集信息,涵盖设计评审、产品展厅和数字孪生场景。AtlanticStudios则将NVIDIAXRAI应用于泰坦尼克号的沉浸式扫描项目,用户可通过语音指令探索沉船、定位兴趣点并获取相关背景信息。