8月18日,Meta面向开发者公开了新工具「MetaXROperator」,作为实验性组件包含在MetaXRSDKv205中。该工具让支持MCP的AI智能体能够查看并操作运行于MetaXRSimulator中的VR应用。(※MCP:连接AI工具与外部系统的通用标准)AI编码辅助已经普及到读代码、写代码、跑测试的阶段。但在VR开发中,流程往往卡在验证环节之前--原因在于智能体无法查看应用画面,也没有按下按钮确认运行状态的手段。MetaXROperator正是为攻克这一课题而发布的。工作原理:插入应用与OpenXR运行时之间,画面数据按需获取工作机制上,该工具插入应用与OpenXR运行时之间,将XR状态与输入控制通过MCP交给外部。由此,智能体可以完成截屏、读取墙壁和地板等空间信息、操控控制器、查看Unity场景结构以及操作UI。画面数据只在智能体主动请求时获取,因此将了对帧率的影响压到最低。应用侧代码无需任何改动。预想的使用场景有三类:逐步追加功能的迭代开发、从复现缺陷到确认修复的完整流程,以及按照自然语言编写的步骤执行测试。BeatGames参与先行测试,自动化验证跑通全流程BeatGames等厂商参与了事前测试。智能体在无需人工介入的情况下,完成了从构建到验证的全部工序。在BeatSaber的菜单界面中,智能体还检测出了此前自动化测试一直遗漏的UI重叠缺陷。当前限制:不支持逐指追踪、音频与动画评估Meta同时披露了现阶段的功能限制:手部追踪仅处理单手级别的瞄准,不支持逐指数据;无法处理音频,也不能评估动画运动。相比移动物体或受时间因素影响的行为,该工具更适合静止场景的验证。Meta计划在本季度内发布后续文章,深入讲解如何读取和操作Unity场景。
Meta近日宣布对其开源沉浸式网页SDK(IWSDK)进行重大更新。该框架基于WebXR标准,旨在帮助开发者在网页端构建VR体验。此次更新的核心,在于引入了由AI编码助手驱动的"智能体工作流"(AgenticWorkflow)。从"辅助生成"到"闭环开发"IWSDK最早于去年的MetaConnect大会上推出,初衷是将物理系统、手部追踪、抓取交互及空间UI等复杂的底层工程问题模块化,让创作者能更专注于创意实现。而新加入的智能体工作流,则进一步集成了ClaudeCode、Cursor、GitHubCopilot及Codex等主流AI编码工具。Meta在开发者博客中明确指出,智能体工作流的意义在于AI不再仅仅局限于生成代码片段,而是能进行自动化测试与验证。这种"生成-测试-验证"的闭环系统,被认为是保障高质量、高可靠性产出的关键。IWSDK的这一集成试图将闭环完全打通,以最大化开发者的生产效率。15小时复刻数万行代码:实证生产力跃迁为演示该系统的实际效能,Meta团队重新构建了其2022年的VR园艺演示项目"ProjectFlowerbed"。原项目由数万行自定义代码构成,而在使用IWSDK的AI工作流及原有美术资源后,整个可交互的Web端VR应用仅耗时15小时便完成了重建。Meta强调,这并非简单的修修补补或生成样板代码,而是一次由AI主导、基于IWSDK的完整重建。WebXR的天然优势:即点即玩与低门槛Meta大力推动IWSDK与AI结合的背后逻辑,核心在于网页端VR(WebXR)的部署便利性。不同于传统VR开发漫长的编译等待,WebXR内容可在浏览器中即时测试,并通过简单URL跨桌面和VR头显分发,省去了应用商店审核与安装包下载的繁琐。值得注意的是,Meta透露仅Quest平台每月已有超100万用户访问WebXR内容,这也成为其持续加码网页端VR生态的重要支点。目前,IWSDK项目已基于MIT许可开源,开发者可通过GitHub进一步了解或体验这一全新的AI工作流。SDK:https://iwsdk.dev/ github:https://github.com/facebook/immersive-web-sdk
伦敦AI视频平台企业Synthesia近日宣布完成2亿美元的E轮融资,公司估值由此攀升至40亿美元。本轮融资由谷歌旗下风险投资部门GoogleVentures领投,英伟达投资部门、知名风投机构KleinerPerkins等也参与其中。Synthesia专注于为企业客户提供基于高度拟真AI数字人的培训视频制作平台。该平台目前已支持160多种语言,被博世、默克、SAP等全球知名企业广泛采用。截至2025年4月,公司年经常性收入(ARR)已突破1亿美元,并在全球拥有超过500名员工,总部设于伦敦,业务覆盖多个国家和地区。从视频生成迈向交互式学习:Synthesia押注AI智能体在巩固其AI视频生成能力的基础上,Synthesia正将战略重心扩展至新一代AI智能体的开发。这类智能体具备自主对话能力,可让员工通过自然语言提问或参与角色扮演式模拟训练,实现更沉浸、高效的技能习得。初步测试数据显示,相比传统培训方式,基于AI智能体的交互式学习在用户参与度与知识留存率方面均表现出显著优势。Synthesia希望通过这一技术演进,将企业培训从"单向观看"升级为"双向互动",进一步提升组织学习效率。