AWEUSA(AugmentedWorldExpo美国增强现实世界博览会)2025将于2025年6月10日至12日在美国加利福尼亚州长滩市隆重举行。作为全球最具影响力的扩展现实(XR)行业盛会之一,AWEUSA汇聚了来自世界各地的技术创新者、行业领袖和科技爱好者,共同探讨XR技术的最新发展与未来趋势。深度体验前沿XR技术,把握主流化浪潮在AWEUSA2025上,参会者将有机会亲身体验最前沿的XR解决方案,了解这项技术如何逐步走向大众市场,并为未来应用提供宝贵洞察。通过主题演讲、圆桌论坛及现场演示等多种形式,参与者可以与行业先驱进行深入交流,全面了解XR技术在医疗、教育、制造、娱乐等多个领域的变革性影响。探索最新硬件、软件与内容工具,拓展专业人脉网络展会期间,众多领先企业将在展览区展示其最新的硬件设备、软件平台与内容创作工具,涵盖从消费级产品到企业级解决方案的广泛领域。来自不同行业的专业人士也将齐聚一堂,交流想法、建立联系,推动各自企业的XR应用落地与发展。无论你是开发者、设计师、创业者还是企业决策者,AWEUSA2025都将为你提供一个开放、多元的平台,助力你在XR社区中学习、探索与合作。多位行业大咖确认出席,共话XR未来蓝图今年的AWEUSA吸引了众多重量级嘉宾登台演讲,其中包括:EvanSpiegel,Snap公司联合创始人兼CEO;PalmerLuckey,Oculus创始人、Anduril创始人;JasonRubin,Meta元宇宙体验副总裁。这些业界领袖的到来,不仅提升了大会的专业高度,也为观众带来了更多期待与灵感。此外,包括Qualcomm、Snap、Google、Lenovo和XREAL在内的多家XR行业领军企业也已确认参展,将在展会上展示其最新的技术成果与产品方案。多项专项计划支持行业发展,助力项目孵化与生态共建为了进一步推动XR行业的发展,AWEUSA2025特别推出了多个重点项目:BuildersNexus--连接行业愿景者,赋能XR创新者该计划旨在打造一个面向初创团队、开发者、设计师、产品经理及商业领袖的连接枢纽,帮助他们对接资源、加速项目成长并扩大影响力。AWE联合创始人兼CEOOriInbar表示:"BuildersNexus是一个全方位覆盖的新老XR创新者赋能平台,旨在帮助他们取得成功。"他还补充道:"无论是初创公司创始人、开发者还是产品经理,都能在这里获得所需的资源、建议与资金支持,借助合作伙伴的力量实现规模化发展,并赢得客户。"GamingHub--助力XR游戏产业腾飞随着XR游戏逐渐进入主流市场,AWE特别设立了GamingHub,专注于为游戏创作者、开发团队、发行商及相关从业者提供更广阔的展示舞台与增长机会。Inbar表示:"我们希望不仅仅是提供展位来展示最新游戏作品,而是要为整个XR游戏生态打开新的增长路径。GamingHub将提升创作者的曝光度、行业影响力,并推动整个XR娱乐板块的发展。"企业VIP计划--为企业用户量身定制专属体验针对企业端用户,AWE提供了专属的EnterpriseVIPProgram,服务于企业高管、产品经理、项目经理以及正在实际应用XR技术的行业用户。该计划包括:展馆优先入场导览;行业专题圆桌会议;私享休息室;主会场预留席位;企业专场会议等内容。AWEUSA2025将于2025年6月10日至12日在美国加州长滩举行,目前门票已在官网开放预订。这是一次不容错过的沉浸式科技盛会,汇聚了从消费级应用到企业级解决方案的广泛内容,是了解未来数字交互方式的最佳窗口。
Varjo的讽刺纪录片《VRISDEAD:超越元宇宙的故事》揭示8个有趣的非消费级VR/混合现实应用芬兰公司Varjo最近推出了一部名为《VRISDEAD:超越元宇宙的故事(VRISDEAD-StoriesBeyondTheMetaverse)》的30分钟纪录片。片名颇具讽刺意味--尽管标题为"VR已死",但整部影片却恰恰展示了VR和混合现实(MR)在专业领域的强大生命力。Varjo是一家专注于高端PC连接式头显的公司,其产品以极高的中央视场角分辨率和高质量的透视混合现实功能著称,主要面向企业与政府用户。目前最新产品是2023年底发布的XR-4系列,标准版售价3990美元,配备自动对焦摄像头的XR-4FocalEdition则高达9990美元。因此,这部纪录片中提到的8个案例全部使用Varjo头显,也就不令人意外了。虽然影片开头那段略带讽刺意味的关于"消费级VR已死"的评论我们并不完全认同,但从Varjo的立场来看,重点展示其产品的核心市场--企业和军用领域,是非常合理的。事实上,许多从事企业级XR解决方案的公司都对整个行业过于强调"消费者接受度"作为衡量成败的唯一标准感到不满。以下是该纪录片中介绍的8个值得关注的专业级VR/MR应用案例:🚗汽车设计(本田Honda)在汽车开发早期阶段,传统上需要制作大量昂贵且耗时的物理样车模型。而如今,位于加州的本田团队正在使用混合现实技术来评估新车的外观与内饰设计方案。借助VarjoMR设备,设计师可以在虚拟空间中直观地查看车辆比例、材质效果等细节,大幅提升了设计效率和协作能力。🏗️建筑设计(KPF建筑事务所)纽约知名建筑事务所KPF使用VR技术,在建筑物尚未建成之前,就能"走进"设计图纸中的空间进行沉浸式体验。"我们希望尽可能减少现场施工问题,有人戴上头显后就会意识到比例不对劲,或者发现实际效果和想象中的不一样。"此外,KPF还利用VR与分布在美国乃至日本的办公室团队远程协作,无需出差即可完成设计方案评审。🛫军用飞行员训练(ColeEngineering公司)ColeEngineering利用混合现实将真实的飞机驾驶舱与虚拟环境结合,用于培训美国军方飞行员操作各类战机。他们强调这套系统具备"可移动性"和"前线部署能力"。更值得注意的是,Varjo头显还被用于全球首个获得美国联邦航空管理局(FAA)认证的VR飞行模拟器,以及一项用于训练乌克兰飞行员操作北约国家提供的F-16战斗机的模拟系统。🛡️军用车辆训练(BohemiaInteractiveSimulations)BohemiaInteractiveSimulations是知名游戏开发商BohemiaInteractive(代表作《武装突袭》《DayZ》)的姊妹公司,两家共享同一套引擎架构。该公司提供多种军事训练解决方案,包括桌面端和平板设备,以及混合现实应用。在这部纪录片中,他们重点介绍了两个MR场景:第一人称视角的装甲车辆操作训练;以沙盘形式进行战术规划演练。"传统的穹顶式系统虽然能实现全方位视觉,但所需的空间、成本和维护都非常高。而现在只需戴上头显,你就拥有了一个'戴在头上的360度穹顶'。"🏥军事医疗训练(BlueRoomSimulations)澳大利亚皇家空军医疗单位BlueRoomSimulations正在使用混合现实技术,训练医生、护士和急救人员在战场环境下实施紧急救护。"我们的任务是对所有加入空军的医务人员进行基础培训,并帮助他们把民用医学技能转化为适用于战场的实战能力。"⛵海事培训(ForceTechnology)丹麦ForceTechnology公司正使用混合现实技术,培训民用船只的船长如何驾驶大型集装箱货轮。"现在你可以在本地办公室直接接受训练,而不需要专程前往实体模拟中心。"这种灵活性大大降低了培训成本,同时提升了教学效率。📊指挥中心可视化(HeadwallTechnology)HeadwallTechnology利用混合现实软件替代传统的多显示器指挥中心布局。"过去要占用一面大屏幕墙或八到十八块显示屏的空间,现在只需一副头显就能实现同样的信息呈现。"这不仅节省了空间,也提高了信息整合与交互的效率。🧠脑机接口研究(OpenBCI)脑机接口(BCI)研究机构OpenBCI曾长期使用ValveIndex头显进行实验,但在2022年转投Varjo怀抱,特别看重其内置的眼动追踪功能。"VR和AR是非常理想的实验平台,因为它可以让人置身于高度逼真的环境中,同时又能像实验室一样精确控制变量。"这对BCI技术的研究与验证起到了极大的推动作用。🔚结语:VR在消费市场之外,依旧生机勃勃尽管"消费级VR是否已死"是一个值得探讨的话题,但Varjo的这部纪录片清晰地表明:VR和MR技术在企业、军事、科研等领域依然充满活力。这些专业应用场景不仅推动了硬件性能的提升,也为未来消费级产品的进化提供了宝贵的技术积累。
Meta正在通过第三方数据公司Appen招募志愿者参与一项名为"ProjectWarhol(安迪·沃霍尔计划)"的项目。该项目旨在收集人类面部表情、语音语调以及身体动作等数据,用于训练其下一代虚拟化身系统--CodecAvatars(编解码化身)。根据招募公告:"ProjectWarhol致力于提升未来虚拟现实的沉浸感。在一次录制会话中,你将完成一系列任务,包括模仿面部表情、朗读句子、做出手势、追踪眼部目标,并进行全身活动范围测试。"该项目的数据采集工作正在宾夕法尼亚州匹兹堡市的一栋四层楼Meta研发中心内进行,该建筑总面积达10万平方英尺,是Meta多年来研究CodecAvatars技术的核心基地。跨越"恐怖谷",打造更真实的虚拟人像在过去十多年里,Meta一直在匹兹堡推进CodecAvatars项目的研究。这一技术旨在创建高度逼真的数字人类形象,并通过VR设备实时追踪用户行为驱动这些虚拟化身。据参与过体验的人士表示,目前最高质量的原型已经实现了跨越"恐怖谷"的突破--即让虚拟人物看起来足够真实而不至于引发不适感。CodecAvatars的终极目标:实现真正的"社交存在感"Meta表示,CodecAvatars的最终目标是实现"社交存在感(socialpresence)"--一种让你下意识地感受到对方就在你身边的感觉,即使他们实际上远在千里之外。目前市面上没有任何消费级产品能够做到这一点。即使是视频通话也远远无法达到这种沉浸式互动的效果。数据采集多年持续推进,离正式上线越来越近虽然Meta告诉《商业内幕》(BusinessInsider)称,他们多年来一直在进行虚拟化身相关数据的采集工作,但近年来,该公司似乎正逐步接近将CodecAvatars推向消费者设备的目标。自2024年初以来,研究人员已经在Quest的操作系统HorizonOS中发现了与CodecAvatars相关的代码线索。这表明该功能可能正在系统底层悄然构建。2024年9月,时任MetaVR/MR副总裁MarkRabkin曾对Engadget表示:"如果我们做得足够好,我认为在下一代头显上实现这一目标是有可能的。"这番话进一步暗示了这项技术即将从实验室走向实际应用。打通移动端:从手机扫描到独立设备Meta已经在基于独立设备的虚拟化身解码方面取得了显著进展。目前最大的挑战在于缩小两种CodecAvatar的质量差距:一种是使用配备超过100台摄像机的专业采集设备生成的高质量虚拟形象;另一种则是通过智能手机或头显扫描生成的、更适合大规模部署的模型。早在2022年,Meta就展示了通过智能手机拍摄生成的CodecAvatar,但当时的流程需要用户做出65种面部表情,耗时超过三分钟,且处理时间长达数小时。而今年早些时候,Meta公布了一种新方法:仅需四张手机自拍,几分钟内即可生成虚拟形象。尽管该模型在RTX3090上运行速度仅为8FPS(帧每秒),但它标志着迈向实用化的重要一步。未来展望:MetaConnect2025或公布新进展随着MetaConnect2025大会在9月17日即将召开,外界普遍期待Meta将在此活动中展示CodecAvatars的最新成果。一个可能的发展路径是,Meta会率先推出一款适用于普通屏幕的简化版CodecAvatar,让用户在WhatsApp和Messenger视频通话中使用比当前MetaAvatar更加写实的虚拟形象。但要真正实现Meta承诺的那种VR编解码化身体验,还需要搭载具备面部追踪功能的新一代头显。而种种迹象表明,这款设备预计将在2026年发布,而不是今年。
作为一家拥有20年沉浸式技术经验的企业级解决方案提供商,Virtualware一直致力于为多个行业客户提供实时三维(RT3D)和沉浸式软件服务。这些行业包括但不限于工艺培训、产品工程、学术教育以及市场营销。进入2025年,Virtualware正在进一步巩固其市场地位,针对旗下旗舰平台VIROO的多产品战略展开多项战略性升级,力求将其打造为企业级扩展现实(XR)应用的全球标杆。根据公司规划,从2025年下半年起,VIROO将加速成为企业XR领域的核心平台。这一目标得到了2024年一系列里程碑成果的有力支撑。CTO谈VIROO的成长之路Virtualware首席技术官SergioBarrera表示:"五年前我们开始开发VIROO时,从未想过它会成为能源、汽车和教育等众多领先企业的关键平台。如今,全球每天都有大量用户通过VIROO进行工业流程培训或执行高级产品工程任务。"VIROO技术持续进化,强化沉浸式体验自Virtualware庆祝成立20周年以来,公司在提供专业沉浸式工具方面取得了长足进步。Barrera补充道:"我们的VIROO技术已被公认为是行业内最具创新性的实时三维解决方案之一,并不断根据客户反馈进行优化升级。这为我们带来了全新的功能,也进一步提升了平台的影响力。"具体而言,VIROOStudio在可用性方面新增了多项改进功能,使其作为RT3D内容编辑工具更加高效易用,从而提升客户的访问便利性和内容创作自由度。此外,在AndroidXR推出后,Virtualware也在积极调整策略,使VIROO更好地支持将应用程序发布到基于Android的独立终端设备上。就在几天前的TED2025上,AndroidXR刚刚完成了一次重大展示。Virtualware正在评估该系统对企业市场的影响。AndroidXR助力企业XR普及去年,谷歌推出了AndroidXR--一个全新的沉浸式操作系统。在发布期间,谷歌强调了GeminiAI助手在增强头显交互和可视化方面的潜力。作为一个基于Android构建的XR操作系统,AndroidXR不仅兼容大量现有移动/平板应用,还支持专为沉浸式环境设计的内容。这一发展解决了XR技术普及过程中的一个重要障碍:用户需要丰富的应用和服务来证明投资XR设备的价值。谷歌在其官方声明中表示,计划为开发者构建一个基础平台,以满足"个人与企业多样化的需求",这也为Virtualware提供了巨大的机遇空间。Unity与Android支持增强,实现跨平台协作VIROO最近还集成了UnityXRInteractionToolkit,使得Unity项目能够更轻松迁移至VIROO平台,并统一了VIROO用户界面与Unity开发环境之间的交互。随着对Unity和Android的持续支持增强,VIROO客户现在可以在多种终端设备之间开展跨平台互动,例如MetaQuest、HTCViveFocus、Pico等VR头显。此外,VIROO还推出了新的云端后端服务,帮助改善XR会话部署的关键要素,包括信息安全、可访问性和平台扩展性。收购Simumatik,强化工业数字孪生能力随着Virtualware的持续扩张,公司也积极参与战略并购。最近,它完成了对Simumatik的收购--一家专注于工业数字孪生内容创建的领先企业。此次收购标志着Virtualware的首次非内生增长,不仅丰富了其产品线,也进一步巩固了其在工业可视化领域的领导地位,同时助力公司确立其在RT3D领域的领先地位。谈及Simumatik的收购,Barrera表示:"VIROO已经是XR领域的标杆产品之一,但并非唯一。收购Simumatik并将其整合进我们的产品组合,增强了公司的整体实力,扩大了我们在工业领域的影响力,并强化了我们的多元化战略。"Simumatik可模拟自动化系统,为开发工业空间的数字孪生提供前沿手段,并与主流PLC和机器人技术紧密结合。其强大的编辑器支持集成多种新技术和厂商设备。借助VIROO的基础设施,Simumatik所需的复杂仿真环境(包括软硬件依赖)也能被远程访问和共享。这意味着用户现在可以通过任何支持VIROO的设备--包括笔记本电脑、台式机、VR头显、多人虚拟空间和CAVE系统--远程协作并操控PLC信号。展望未来:企业XR市场正走向成熟这一切意味着什么?对于Virtualware来说,这是其在企业XR领域持续发展的体现;而对于整个行业而言,则预示着企业级XR和RT3D解决方案正在迅速成熟,并广泛应用于提升运营效率的各个领域。如果像Virtualware这样的企业能继续紧跟XR技术的发展步伐,那么到2026年,这个日益成熟的市场将为企业带来前所未有的创新工具和商业机会。
2024年,虚拟现实市场规模已达到530亿美元,预计到2034年将激增至5570亿美元。这一迅猛增长得益于头显设备成本的下降,以及VR在企业、医疗和教育等领域的广泛应用。当数字沉浸技术重塑行业格局时,Nvidia、Apple和Meta正引领VR前沿随着VR技术从边缘走向主流,英伟达(Nvidia,NASDAQ:NVDA)、苹果(Apple,NASDAQ:AAPL)和Meta(NASDAQ:META)正以各自独特的方式布局这一新兴领域。结合它们最新的财报电话会议内容、高管评论及市场动向,我们将深入剖析这三家公司围绕VR打造的投资逻辑,权衡其优势与潜在风险。英伟达(NVDA)|构建VR生态的底层架构虽然英伟达并不生产VR头显设备,但它的GPU是推动沉浸式体验的核心动力。最新季度推出的Blackwell架构收入高达11亿美元,为高保真渲染提供了强大的算力支持--无论是游戏还是工业模拟,都离不开这项技术。CEO黄仁勋(JensenHuang)最近强调了Omniverse平台在3D协作中的作用,并指出西门子(Siemens)等公司正利用该平台进行虚拟工厂规划,这对VR内容创作者来说是一个重大利好。英伟达的独特之处在于它对VR的"间接参与":通过为开发者提供芯片和软件解决方案,避开了消费者头显市场的波动性。当然,VR只是其数据中心业务(年收入达1150亿美元)中的一小部分。但这种广泛而稳定的营收结构,使英伟达能够像少数科技巨头一样,持续重金投入VR研究。这也意味着它可能在未来的技术战争中占据主导地位。苹果(AAPL)|打造高端VR的未来苹果售价高达3,500美元的"空间计算"设备VisionPro初期表现并不理想。不过,苹果似乎更倾向于将其推向专业人士而非普通用户。在最近的财报电话会议上,CEO库克(TimCook)强调了VisionPro在企业端的应用进展,例如虚拟手术培训和建筑设计。例如,斯坦福医学中心已将VisionPro引入手术流程,用于实时数据可视化,从而提升复杂手术的精准度。尽管VR相关收入相较于iPhone每季贡献的510亿美元来说微不足道,但苹果生态系统的整合优势(如Vision与Mac和iPad的无缝协作)可能有助于推动采用率。我欣赏苹果愿意回归原点、重新打磨产品并追求在消费级VR市场领先地位的做法。其每年超过1000亿美元的自由现金流,也为它在这一新兴市场中不断优化产品提供了充足的空间。Meta(META)|追逐昂贵梦想的VR先驱者Meta的Quest系列头显在消费级VR市场占据主导地位,但其RealityLabs部门却是一个"烧钱黑洞"。在Q1财报中,Meta披露RealityLabs收入仅4.12亿美元,同比下降6%,亏损高达42亿美元,自2020年以来累计亏损已超600亿美元。CEO扎克伯格表示2025年将是关键之年,强调AI功能(如实时翻译)以及Ray-BanMeta智能眼镜销量翻三倍,都是迈向"VR未来"的重要步骤。然而,我们目前尚不清楚Meta是否能在短期内收回巨额投资,更别提获得可观回报。幸运的是,Meta拥有一个显著优势:其开发者友好的生态系统使其在市场中处于领先地位。据2024年数据显示,Quest系列占据了全球近四分之三的头显出货量。更重要的是,其核心社交应用家族(Facebook、Instagram、WhatsApp等)Q1收入达414亿美元,利润218亿美元,足以支撑RealityLabs的持续亏损,不至于动摇投资者对其整体前景的信心。虚拟现实:娱乐产业的新阶段VR正在打破传统娱乐模式的边界,突破平面屏幕和被动观看的限制。在完全成熟后,VR将模糊观察者与参与者之间的界限。随着像NVDA、AAPL和META这样的科技巨头不断投入数十亿美元拓展VR技术,超越传统游戏范畴,VR正在加速走向主流。尽管具体普及时间仍存在不确定性,但可以肯定的是,这一趋势已经开启。总结:三大巨头的VR投资路径对比英伟达是低风险的VR投资标的,作为整个生态的底层技术提供者,不依赖于头显销售,尽管其股价也反映了更广泛的科技股走势。苹果VisionPro是一项高端且耐心的长期投资,具有变革潜力,但在短期内影响有限。Meta的Quest系列虽然目前亏损严重,但若VR成为主流,其回报也将最为可观。随着市场不断扩大,每家公司的战略路径都截然不同。如果你希望获得VR行业的敞口,这三家科技巨头都值得关注。
成立于2019年的Shenanigans是一家创意科技工作室,过去五年来一直致力于为品牌在Snapchat和TikTok等社交平台上开发富有创意的增强现实(AR)广告。创始人ShahwaliShayan表示:"我们为那些希望以独特方式运用营销的品牌提供技术与创意解决方案,帮助他们将讲故事和叙事构建融入营销活动之中。"最近,这家工作室推出了一个由BBC委托开发的AR手语教学工具,用户可通过Snapchat应用程序体验这一基于智能手机的增强现实功能,学习手语沟通方法。本周,Shayan接受了独家专访,详细介绍了在Snap平台上工作的流程、与BBC合作开发AR项目的经历,以及Snap在扩展现实(XR)市场中的发展现状。Snap:触手可及的AR智能手机体验Shenanigans对Snap及其不断扩大的AR生态系统充满信心。Shayan表示:"我认为LensStudio是目前最成熟的增强现实软件之一。"他进一步解释道:"作为一名经常使用LensStudio的开发者,我可以负责任地说,这是目前最强大的AR创作工具之一。你能在里面实现的功能,是其他任何AR软件都无法比拟的。"虽然Unity或Unreal等平台也适合开发"复杂的增强现实体验",但Shayan强调:"在推动AR技术民主化方面,Snap已经树立了一个榜样,其他公司也应该效仿。"此外,Snap的LensStudio还集成了机器学习和人工智能等前沿技术,使其开发流程更加智能化和高效。Snap的商业模式:不只是社交媒体公司,更是"摄像头优先"的企业Shayan表示:"我们通常把Snap当作是一家社交媒体公司来看待,但它本质上是一家以摄像头为核心的企业。他们通过AR技术让自己在竞争中脱颖而出,并赋能创作者建立属于自己的事业,这一点非常有趣。"他还补充道:"他们为我们提供了工具,还拥有一个工程师社区,甚至专门组建了支持创作者的团队。这充分说明他们对创作者生态的重视。"开发BBC委托项目:打造AR手语教学体验这款SnapchatLens(镜头滤镜)是为了宣传BBC与播音员RosalindEllis合作的一部纪录片系列而设计的。由于Rosalind本人来自听障群体,并长期倡导英国手语(BritishSignLanguage),项目的核心理念便是以手语为切入点进行推广。Shayan解释说:"我们Shenanigans团队中没有人来自听障群体,因此我们意识到必须邀请一位来自该领域的专家参与项目,以确保这个AR体验真实且尊重社区文化。"于是,他们联系了名为DeafUmbrella的组织,并通过该组织找到了顾问LorraineRobinson,她是一位经验丰富的英国手语专家,为整个项目带来了极大的专业性和情感温度。Shayan表示:"我们进行了多次咨询会议,很多细节是我们从未考虑过的。例如,在向BBC提交分镜脚本时,我们甚至没有考虑到英国手语对于左右手习惯的人存在差异的问题。这是Lorraine提醒我们的,她说这是一个至关重要的细节--甚至在体验开始之前就必须解决。"他强调:"整个过程是一个真正的协作成果。"Shenanigans、Lorraine、DeafUmbrella以及BBC共同合作,才让这款SnapchatAR体验得以诞生。尽管该项目最初是作为营销推广的一部分,但最终呈现出的产品更像是一款具有"超越营销价值"的实用工具。Snap的下一步:AR智能眼镜的未来正如Shayan所指出的那样,Snap不仅仅局限于Snapchat平台。该公司正在积极开发其SpectaclesAR智能眼镜,目前该产品仍处于仅限开发者访问的测试阶段。随着Google重新加入AR眼镜赛道,Meta等巨头也在加大投入,AR智能眼镜市场的竞争日益激烈。面对这种压力,Shayan表示:"Snap正在引领这场对话。尽管Spectacles目前还在开发者社区中,数量不多,但他们所创造的一些体验令人惊叹。"他进一步表示:"一家公司想要真正推动这项技术的发展,最好的方式就是将设备交给开发者,让他们自由探索如何塑造未来的智能眼镜世界。"📌结语从与BBC合作开发AR手语教学工具,到积极推动SnapLensStudio的创新应用,Shenanigans展现了如何将AR技术转化为有社会意义的实用工具。同时,Snap的生态系统正逐步成为品牌、开发者和创作者共同探索增强现实潜力的重要平台。
Meta最近推出了一款新版3D资产生成AI系统,并表示这是"一次重大的飞跃"。此前,Meta的HorizonDesktopEditor工具--用于创建HorizonWorlds内容--在上个月新增了通过文本提示生成3D资产的功能,据推测使用的是Meta在2024年推出的原始AssetGen模型。这一功能让用户无需任何3D建模技能,就能在数小时内免费构建个性化的虚拟世界。然而,这些由AI生成的资产在质量上存在明显问题,尤其在VR中近距离观察时尤为明显,而AssetGen2.0正是为了解决这些问题。Meta表示,AssetGen2.0相比初代模型,在细节和精度方面实现了"显著提升",包括"几何结构更加一致、细节更加精细"。公司称AssetGen2.0为行业设立了新标准,并"拓展了生成式AI的可能性边界"。从技术层面来看,AssetGen2.0使用了与初代完全不同的架构。AssetGen1.0的工作方式是:首先根据文本提示生成多个2D图像视角,然后再将这些图像输入另一个神经网络来生成最终的3D资产。而AssetGen2.0则采用单阶段的3D扩散模型,直接从文本提示中生成3D资产,并且是在大量3D资产数据集上进行训练的。Meta表示,该系统已经在内部用于3D虚拟世界的构建,并计划在今年晚些时候将其集成到HorizonDesktopEditor中。Meta在官方声明中写道:"我们预计AssetGen2.0将进一步降低3D内容创作的门槛,使其像2D内容创作一样易于获取,为在Meta的Horizon和Avatar平台上工作的艺术家、设计师和开发者打开全新的创意空间。"此外,Meta还透露正在开发支持"整套3D场景"生成的AI技术。这项功能将使创作者能够通过文本或图像提示,在几分钟内生成完整的虚拟世界,而不仅仅是单独的3D资产。
你是否在考虑将触觉反馈(haptics)技术应用于企业的实际场景?现在正是一个绝佳的时机。触觉反馈早已不再只是游戏手柄或智能手机的专属功能,它正在扩展现实(XR)领域掀起波澜,为虚拟办公空间和培训环境带来前所未有的沉浸感。尽管并非每家企业都急于抢购最新款的触觉手套或全球顶尖的触觉全身服,但越来越多的企业开始意识到:将"触感"引入员工培训领域,能带来实实在在的好处。结合XR技术的高真实感触觉反馈设备,使企业能够构建出超越文字、听觉或视觉提示的培训与开发模拟系统。员工不仅可以"触摸"并互动数字产品,还能培养肌肉记忆,并远程体验使用新设备的真实感受。这是一种前所未有的"动手式"沉浸式培训形式。企业培训中的触觉技术:触感的力量随着企业不断采用扩展现实技术用于各种应用场景,他们也在持续探索如何让这些体验更加真实、更具沉浸感。出色的视觉效果和空间音频虽然重要,但触觉技术则进一步带来了真实的触感反馈,为每一次虚拟交互增添质感。虽然触觉反馈技术可以增强多种XR体验--从元宇宙客户互动到协作会议--但大多数科技领导者认为,最大的机遇仍在于培训与发展领域。研究表明,沉浸式、动手实践的学习方式能够显著提高知识的留存率。如果你希望某人能够自信地操作制造工厂中的重型机械,或完成复杂的外科手术,你肯定希望他们在接近真实、且无风险的环境中进行练习。将触觉技术融入企业培训场景,可带来以下几大优势:更高的参与度与知识留存率研究显示,我们通过"实践"学习的效果最好。在触觉模拟中感受到手术刀的重量、焊枪的阻力等,大大强化了"做中学"的理念。例如,2022年《美国国家医学图书馆》发布的一份报告显示,在一项带有触觉反馈的"骨骼钻孔模拟"训练中,参与学生的实际操作表现优于未接受该训练的同龄人。此外,触觉反馈还增强了我们对所见内容的"连接感",从而提升情感投入,进一步促进知识的长期记忆。更快掌握技能(而且没有风险)触觉反馈消除了现实世界模拟中的危险性和高昂成本。医疗从业者可以在虚拟现实中进行手术练习,而无需昂贵的尸体资源,也不必担心患者安全问题。同样地,制造业的学员可以在XR环境中学习焊接或重型设备操作,借助触觉手套模拟工具的真实手感。这不仅提高了安全性、减少了停机时间,也确保了员工在真正进入现实工作环境前,已经掌握了必要的技能。提升肌肉记忆通过在企业培训中使用触觉技术,员工可以更快地建立肌肉记忆。逼真的力反馈、震动和温度变化,让使用者清楚地感知工具或零件应有的感觉。这意味着更少的时间花在摸索新流程上,更多的精力投入到熟练掌握技能中。同时,培训师还可以实时收集数据,如动作角度、施加力度等,并据此为每位学员提供精准反馈,进一步优化培训效果。触觉技术在企业XR培训中的应用案例:跨行业展示许多公司已经在尝试利用沉浸式学习的力量,借助扩展现实头显来降低成本和风险、提升参与度。而在企业培训中加入触觉反馈后,沉浸式学习的优势更加明显,因为培训过程中调动了更多感官。下面我们来看看一些触觉技术在企业培训项目中的具体用例。政府与全球安全领域针对政府团队,尤其是涉及公共安全和国防领域的人员培训,往往既昂贵又危险。专业人员需要为应对高风险情境做好准备,但在现实中安全地开展模拟训练并不容易。借助XR与触觉反馈工具,可以提供一种更安全、高效的培训方式。例如,2023年,HaptX就曾与美国政府合作,开发了一项结合触觉手套的培训模块,帮助学员学习如何安全处理危险材料。学员可以通过手套感受到虚拟物体的真实阻力,这对于精细或高危操作至关重要。最终结果是:一支更具备实战能力的队伍,且避免了放射性暴露的风险。重工业:能源及其他领域在处理大型机械或危险环境时,虚拟培训对于提升员工的能力和安全性至关重要。触觉反馈技术可以彻底改变这一过程,使员工能够体验与关键工具互动的真实感受。例如,TouchDIVERPro这样的触觉手套让学员能够感受到虚拟物体的重量、温度甚至温度变化,从而带来更加沉浸式的培训体验。近期,MAIZE与WEART合作开发了一款面向能源行业的VR培训解决方案,该方案依赖于触觉反馈帮助专业人员练习紧急程序并操作复杂机械。这些触觉系统能自动适应自然动作,并收集有价值的数据,帮助企业构建更高效的工业劳动力队伍。医疗行业:变革中的培训方式医疗专业人员高度依赖动手实践经验。虽然实践手术至关重要,但学员无法在真实患者身上进行练习,而尸体资源昂贵。这正是XR技术和商业中的触觉反馈变得越来越重要的原因。通过触觉反馈,员工可以在培训中实际感受到真实的力反馈、温度变化以及组织阻力。像MadVR这样的公司已经开始基于触觉反馈创建高级外科教学模块,旨在帮助医务人员更快、更高效地掌握挽救生命所需的技能。这种方法的一大优点是没有风险。因为在模拟环境中,学生可以安全地犯错,并感受到错误带来的触觉后果,而不对患者(或设备)造成实际伤害。此外,通过触觉数据,培训师可以跟踪团队施加的力量大小或切割角度,以提供定制化反馈。工程与制造业在工程和制造领域,企业已经在产品和原型设计等业务流程中使用触觉反馈。毕竟,借助XR解决方案,团队可以更快地创建高质量的产品"数字孪生",并与利益相关者分享,而无需承担成本。通过触觉反馈,不同地点的团队成员可以虚拟"操控"原型,感受其重量并探索特性,然后再构建物理模型。此外,他们还可以利用数字孪生识别组件是否过于笨重、未对齐或人体工学不佳。触觉反馈也能增强培训体验。例如,在2024年,HaptX与RoundTableLearning合作为铁路工程师创造了沉浸式培训体验。该系统使用虚拟现实和基于触摸的反馈,向员工展示如何排查和修复复杂产品。逼真的触觉提示帮助工作人员更好地理解力量、重量和脆弱性,当他们转向真正的机车工作时,这可以防止代价高昂的错误或受伤。零售及客户接触环境将触觉反馈应用于企业培训场景的公司不仅限于那些需要员工处理敏感材料或复杂设备的行业。我们还看到触觉反馈在更多面向客户的角色中出现。想象一下,使用虚拟店铺布局来引导新销售助理入职。通过触觉手套,他们可以学习如何处理产品,体验真实的货架布置,甚至在面对真实客户之前就能感知到易碎物品的重量。我们甚至可以看到更具沉浸感的产品演示的兴起,带有触觉反馈配件,允许顾客"试用"产品。例如,HaptX曾与日产合作创建了一个触觉系统,允许试驾者握住虚拟方向盘。各行各业中其他面向客户的团队也可以使用触觉界面远程为客户支持和服务提供支持。例如,专家可以通过触觉界面向现场技术人员展示所需的具体扭矩值或插入部件的正确角度。借助机器人技术和物联网,技术人员可以使用连接到机械臂的触觉手套从远处完成复杂的维修工作。触觉反馈在商业中的未来:指尖上的未来触觉反馈在商业环境中的潜力预示着沉浸式企业培训项目的光明前景。通过在虚拟学习中注入真实的触感,触觉设备降低了动手教育的成本和危险性。更重要的是,它们带回了宝贵的"人性元素",即学习者可以感受、实验并在安全环境下犯错。无论你是想在制造业中提升员工技能,将沉浸式外科模拟引入医院,还是赋予技术人员远程支持能力,触觉反馈都可以将你的培训提升到新的水平。触觉支持的培训体验潜力才刚刚开始展现。随着先进的用户追踪和反馈技术的发展,虚拟仿真与"现实生活"之间的界限将继续模糊,为教育带来新的机遇。准备好探索了吗?了解触觉反馈与用户追踪技术如何共同推动沉浸式职场的未来发展。
近日,Meta发布了其2025年第一季度财报电话会议内容,揭示了公司在向人工智能和增强现实(AR)创新转型过程中的关键动向。与此同时,谷歌作为XR领域的一匹"黑马"正在崛起,其推出的AndroidXR框架表明,曾一度沉寂的GoogleGlass正以全新的形式回归。随着其他科技巨头纷纷进军AR智能眼镜市场,长期占据XR行业领导地位的Meta显然也渴望继续保持其主导地位。尤其是在AR智能眼镜领域,Meta借助与雷朋(Ray-Ban)的合作取得了显著成功。在最近的财报电话会议上,Meta对智能眼镜的战略高度重视。公司CEO马克·扎克伯格表示:"Ray-BanMetaAI眼镜在过去一年的销量增长了三倍,拥有它的用户使用频率非常高。我们还计划在今年晚些时候与合作伙伴EssilorLuxottica推出几款新产品,进一步拓展这一品类,并为眼镜增添更多技术功能。"尽管取得了一定成绩且公司态度乐观,但Meta的首席财务官苏珊·李(SusanLi)指出,在RealityLabs部门中,"第一季度收入为4.12亿美元,同比下降6%,主要原因是MetaQuest销量下滑,不过Ray-BanMetaAI眼镜的销售增长部分抵消了这一影响。"她还提到,RealityLabs的支出达到46亿美元,同比上升8%,主要原因是员工薪酬成本增加。同时,该部门的运营亏损高达42亿美元;从历史来看,RealityLabs一直处于亏损状态,但这显然是Meta在为未来计算平台和技术创新进行长期投资。她补充道:"说到RealityLabs,Ray-BanMetaAI眼镜的表现非常强劲,月活跃用户数量是一年前的四倍以上,而使用语音命令的用户增长速度甚至更快。人们用它来回答问题、控制眼镜。本月,我们在所有市场全面推出了实时翻译功能,支持英语、法语、意大利语和西班牙语。现在,当你与使用这些语言的人交谈时,你可以通过眼镜实时听到他们话语的译文。"Meta、智能眼镜与推动XR发展的关键力量Ray-BanMeta智能眼镜在英国迎来了备受期待的AI升级。这款设备在市场逐渐成熟的过程中持续受到欢迎。而在去年的MetaConnect2024大会上,扎克伯格还首次公开了备受关注的原型产品Orion--一款实验性的增强现实智能眼镜。在活动期间,扎克伯格称这款设备是"目前最先进的智能眼镜,也是我们首款全息AR眼镜原型"。他还宣布了一项重大突破:神经接口交互技术。Orion允许用户通过手腕上的设备,利用大脑电信号与智能眼镜互动。在发布后,CTO安德鲁·博斯沃思(AndrewBosworth)在接受采访时表示:"我们刚刚发布了Orion,这是我们开发的一款AR眼镜原型。打造像这样具备广视角显示、内置无线AI功能、并能运行核心体验的完整AR眼镜,是我们近十年来一直在努力的目标。最初启动这个项目时,团队做过评估,认为我们成功打造出这种眼镜的概率只有10%。所以,我们克服了很多困难才走到今天这一步。"虽然这款设备距离商业化仍需数年时间,但将Orion的研究成果整合进Ray-Ban智能眼镜以及混合现实企业解决方案中,已成为众多XR观察者密切关注的方向。今年三月,Meta又有两位高管谈到了AR智能眼镜的未来,这是Meta希望凭借现有产品和原型抢占领先地位的领域。副总裁AlexHimel在媒体采访中强调了这项技术对公司战略的重要性。Rabkin表示:"Meta覆盖了从AR雷朋智能眼镜到MRQuest头显在内的整个XR设备光谱,我们致力于通过各种设备帮助人们提升生活质量,满足他们的不同需求。"Himel还补充说:"当前的人工智能给人的感觉是无限强大的,但很多人却不知道该如何入手--就像面对一个空白的文本框或一个麦克风,你可以说任何话,却不知从何开始。我们去年发布的许多功能正是为了针对特定使用场景进行优化,比如你可以看到一个电话号码,然后直接说'打电话'。AI是我最激动的技术之一,它有能力开启一段持续对话的AI会话,它可以随时感知你在看什么。我觉得AI的潜力巨大,我们非常期待深入挖掘它。"Himel继续说道:"当我们谈到增强现实时,我们指的是在观察物理世界的同时能看到叠加的数字信息,无论是虚拟电视取代实体电视,还是桌面上的虚拟相框。我们已经证明了这一点是可能的,我认为这是一个重要的里程碑。"展望2026:XR行业将迎来巨变到2026年之前,XR领域将迎来巨大的变化。伴随着这些变革,行业领导者的格局也可能发生转变。随着智能眼镜的兴起,一场新的竞赛也在悄然展开--各大科技公司正竞相争夺XR领域的领导地位。
在DeepSeek对美国人工智能行业造成冲击之后,一场类似的浪潮可能正在XR/实时3D(RT3D)市场酝酿。DeepSeek作为一家价格更低廉、来自海外的人工智能巨头竞争对手,曾在美国科技界掀起巨大波澜,例如NVIDIA的股价一度以前所未有的速度暴跌。如今,在XR(扩展现实)和RT3D解决方案市场中,类似的趋势似乎正在形成。随着最近的发展,这场"冲击波"可能会波及到XR领域,或者说RT3D解决方案市场。像Unreal和Unity这样的RT3D引擎从消费级到企业级都广泛支持XR应用,为沉浸式体验的开发与分发提供了一个通用框架,无论最终用途是什么场景。当然,还有其他一些专注于特定商业应用场景的RT3D内容创作引擎,如Virtualware和SynergyXR。然而,Unreal与Unity无疑仍是这一领域的两大巨头,拥有不可忽视的影响力。正因如此,现在看来,一场类似DeepSeek带来的冲击或许也将影响这个领域。据XR行业内部消息透露,一个由中国公司开发的Unity克隆产品正在崛起,这或将分裂那些原本面向国际客户开发RT3D解决方案的开发者群体。这款名为TuanjieEngine(团结引擎)的产品专为中国市场本地化设计,完全兼容国内平台与法规要求。此外,它的部分功能已经比国际版Unity的某些特性更为先进。Unity中国在包括米哈游(miHoYo)、阿里巴巴和中国移动等国内科技巨头的支持下开发了该引擎,其影响将很快显现出来。XR领域的持续影响这种观点源于今年1月DeepSeek在市场上引发的颠覆性冲击。当时,它以远低于现有供应商的价格推出了具有竞争力的AI服务,导致NVIDIA股价一度大幅下跌。尽管随后市场逐渐恢复,但这一事件凸显了来自美国以外地区低成本AI替代方案的重要性。DeepSeek的出现正值全球领先国家加大对人工智能的投资并放宽相关限制,以期在这项新兴技术领域占据一席之地。DeepSeek所采取的低价策略引发了人们的猜测:是否类似的转变也会出现在OpenAI推出高成本"代理"服务之后?虽然未来仍存在不确定性,但这为许多公司带来了新的机会,而不仅仅是DeepSeek。不过,DeepSeek与TuanjieEngine提供的价值主张截然不同,因此后者的市场影响很可能不会像DeepSeek那样剧烈。然而,随着中美之间国际贸易关税紧张局势的加剧,国际软硬件解决方案提供商的反应预计也将随之而来。出于多种原因,XR与RT3D行业可能会看到越来越多领先的解决方案提供商根据不同市场创建替代性服务,以应对国际监管环境的变化。如果这种趋势发展到类似DeepSeek的规模,其影响将在短期内显现出来。
扩展现实(XR)沉浸式工作空间正在彻底改变我们的工作方式。元宇宙和XR头显早已不再只是消费者的专属工具,它们正广泛应用于各行各业,提升团队协作效率、创新能力以及员工技能培训。根据普华永道(PwC)的研究,沉浸式技术在未来几年内可能像传统PC一样成为办公场景中的标配。随着技术的不断演进,我们已不再局限于简单的虚拟现实头显,而是拥有更先进的空间计算系统、触觉配件和生物传感设备,这些都在重塑现代职场体验。在众多推动沉浸式体验发展的技术中,用户跟踪和触觉反馈尤其引人注目。这两项技术不仅能增强沉浸感,还能显著提升远程协作、培训效率和员工参与度。什么是用户跟踪?"用户跟踪"是指通过各种传感器和技术手段捕捉用户的动作、视线、手势甚至生理数据的过程。例如,MetaQuest3的手部追踪功能让使用者无需手持控制器即可进行操作;苹果VisionPro的眼动追踪技术则支持焦点渲染、身份验证等功能。一些公司还尝试使用EMG腕带、追踪戒指等设备,以实现对身体动作、心率和行为模式的高精度监测。这些数据不仅可用于优化用户体验,还可帮助管理者了解员工在不同环境下的专注度和压力水平。什么是触觉反馈?"触觉"是"基于触感"的高级表达方式。从智能手表的震动提醒到手机按键的轻微反馈,我们其实已经在日常生活中接触过基础的触觉技术。而在XR领域,触觉反馈更加先进--比如WEARTTouchDIVER手套可以模拟力量、温度和纹理,使训练过程更加真实。军事、医疗、制造业等领域已经开始采用触觉全身套装,为员工提供更具代入感的模拟训练。想象一下,在虚拟手术室中练习缝合时,你能真正感受到针线穿过皮肤的阻力;或者在虚拟工厂中操作重型机械时,能感受到振动与压力。用户跟踪与触觉反馈如何协同工作?这两项技术的结合,使得沉浸式体验更加丰富和真实:增强虚拟协作的真实感:通过手部、眼动和面部表情的精准还原,虚拟形象能够更自然地互动。配合触觉反馈,同事之间甚至可以在虚拟会议中"握手"或"轻拍肩膀",大大提升沟通的真实性和亲密度。优化远程与混合办公流程:借助触觉手套,远程工作者可以操控机器人执行任务,产品设计师也能"触摸"虚拟原型。而用户跟踪则可提供行为洞察,帮助企业优化远程工作的安全性和效率。提升培训与技能提升效果:肌肉记忆建立:触觉设备可模拟重量与阻力,帮助员工掌握实际操作技巧;技能观察与反馈:通过眼动和手势追踪,培训师可以精准指出学员的问题;无风险模拟训练:高危作业如核电站维修、炼油厂操作等,可在安全环境中反复演练。行业应用场景详解医疗健康:从培训到康复的全面升级医疗行业是XR沉浸式工作空间最早且最积极的应用领域之一。外科培训:医学生戴上具备眼动追踪功能的头显后,系统会自动放大虚拟病人的解剖结构并提供诊断信息。UCBerkeley等机构已在利用此类技术进行医学教学。触觉辅助手术练习:医生可通过触觉手套感受手术刀的压力变化,提高操作熟练度。康复治疗:患者佩戴动作追踪设备进行康复训练,系统记录每次动作并评估恢复进度;触觉设备也可帮助他们重新学习精细动作控制。制造业:安全高效的培训与设计协作制造行业涉及大量复杂机器的操作和严格的安全规程。一次失误可能带来高昂代价,因此越来越多工厂开始引入XR技术。装配与维护训练:工人通过XR头显练习发动机组装或传送带检修,手部动作被实时追踪。若施力过大,触觉手套会模拟机械阻力给予反馈。专家远程指导:Adient等公司表示,XR技术极大提升了现场人员的培训效率,并便于专家远程查看操作过程并提供建议。产品设计协作:虚拟团队成员可以共同操作3D模型,直观地进行修改与讨论,比传统的2D图纸更具交互性。企业办公:打破远程协作壁垒远程办公者也开始拥抱沉浸式工作空间,许多世界500强企业已尝试用VR头显替代视频会议。虚拟会议室:员工进入定制化虚拟环境,无需控制器即可在白板上书写、展示设计方案。触觉互动:团队成员可以通过触觉反馈握手、轻拍肩头,甚至参与游戏化的团建活动。团建新体验:眼动追踪可分析谁关注了哪些细节,触觉互动则让环境更具临场感。参与者普遍反馈比传统线上破冰活动更有凝聚力。重工业:提升安全性与数据获取能力采矿、建筑、能源等行业面临高强度和潜在危险的工作环境,传统培训成本高、风险大。虚拟实地训练:工人可在逼真的3D重建矿井或钻井平台上操作设备,手部追踪使其可"拿取"工具,触觉手套提供真实的操作反馈。注意力监测:眼动追踪有助于识别员工是否忽略关键安全标识,或在模拟中出现分心现象。快速技能培养:MAIZE公司使用TouchDIVERG1触觉手套为能源技术人员提供更沉浸的培训体验,显著缩短学习曲线。XR沉浸式工作空间的未来趋势更高级的用户跟踪技术未来的XR设备将采集更细致的数据:EMG腕带可检测心率与肌肉运动;手套能捕捉手指微小动作;甚至有设备可识别情绪状态,通过眼神与心跳变化提供心理洞察。新型触觉穿戴设备触觉手套只是起点。目前已有公司在开发:可穿戴触觉戒指智能腕带整体触觉服装这些设备将进一步提升沉浸感,尤其适用于需要高仿真操作的培训场景。多感官融合体验除了"触感",我们或许还能在XR中感知温度、气味甚至风压。WeART等公司正在研发集成温度感应的触觉设备,为用户提供更完整的感官刺激。AI与用户跟踪的深度结合人工智能已开始分析眼动和手势数据。未来,AI或将支持:自适应反馈机制培训内容个性化推荐实时行为预测这将使培训过程更高效、更具针对性。隐私、合规与伦理考量尽管前景广阔,但企业在部署这些技术时也需谨慎对待以下问题:隐私保护:用户的眼动轨迹、心率、手势甚至脑电波都属于敏感数据;数据存储与使用:企业必须确保数据加密、匿名化处理,并明确告知用户数据用途;伦理边界:过度依赖生物识别数据可能导致"监控文化",影响员工信任;安全风险:黑客可能试图窃取虹膜扫描、指纹等生物特征,用于伪造身份或制作深度伪造内容。对此,企业应采取主动策略:制定透明的数据政策;获取用户知情同意;强化网络安全防护;推动行业标准建设。展望未来:迈向"以人为本"的沉浸式职场我们正迈入一个全新的XR沉浸式工作空间时代。触觉反馈带来了真实的"触感",用户跟踪则打开了数据与交互的新维度。这两项技术的结合,不仅提升了企业的协作效率与培训质量,也让远程办公更加人性化。虽然仍存在隐私与安全挑战,但只要合理规划、审慎实施,XR技术无疑将为企业带来前所未有的机遇。
尽管Meta的Quest头显一直以来都依赖摄像头来追踪头显位置、控制器状态以及用户周围环境,但开发者却从未拥有同等水平的相机访问权限。今年早些时候,Meta首次允许开发者在私有项目中尝试直接访问头显摄像头功能;而从本周起,开发者现在可以公开发布使用这一新功能的应用。PassthroughCameraAPI更新上线:Quest3和3S正式开放相机权限随着本周发布的PassthroughCameraAPI(直通摄像头应用编程接口)更新,Quest3和Quest3S的开发者现在可以将能够直接调用前置摄像头的App发布到Horizon商店。这意味着第三方应用将有能力"看见"用户所看到的世界,并基于此进行理解和交互。例如,开发者可以为应用添加计算机视觉功能,用于识别和追踪场景中的物体或人物,或者构建用户环境的地图,以实现更高级的分析与互动体验。长期受限的技术权限,如今终于解封长期以来,由于Meta对头显硬件访问权限的限制,这类功能一直无法实现。尽管智能手机平台早已广泛向开发者开放了计算机视觉能力,但Meta在这方面一直持谨慎态度,这显然与其对隐私保护的关注有关--尤其是在公司过去曾多次卷入隐私争议的背景下。在此之前,第三方应用虽然也能获取一些关于用户环境的信息,比如房间形状和大致物体布局,但这些数据都是由系统经过处理后提供,App本身无法直接访问摄像头画面。这种方式让开发者可以创建一定程度上具备空间感知能力的混合现实应用,但也导致一些特定需求难以实现,例如精确追踪用户手中持有的某个物体。从实验阶段走向正式可用去年,Meta宣布将逐步开放对摄像头的直接访问权限。今年三月,公司开始向开发者提供该功能的实验性版本,允许他们开发能调用摄像头的应用程序。不过直到现在,这些应用才被允许对外发布、面向公众使用。摄像头性能参数公布Meta同时公布了开发者可在Quest3和Quest3S上访问的摄像头技术规格:图像采集延迟:40–60毫秒GPU占用率:每个摄像头流约1–2%内存占用:约45MB数据帧率:30Hz最大分辨率:1280×960内部数据格式:YUV420数据使用政策同步明确Meta表示,开发者在Quest平台上对摄像头数据的使用需遵守其《开发者数据使用政策》(DeveloperDataUsePolicy),其中包括"禁止的数据使用行为"条款。根据该政策,开发者不得利用摄像头数据进行、协助或提供监控工具,也不得用于唯一标识设备或用户(除非政策中有特别许可)。小结此次摄像头权限的全面开放,标志着Meta在推动VR/AR应用边界方面迈出了重要一步。它不仅为开发者解锁了更多创作自由,也为未来的混合现实体验打开了新的可能性。与此同时,Meta也在努力在创新与隐私保护之间取得平衡。
扩展现实(ExtendedReality,简称XR)技术--包括增强现实(AR)、虚拟现实(VR)和混合现实(MR)--正在正式进入企业应用场景。它不仅改变了员工的培训方式、协作模式,甚至影响了创意流程。然而,随着XR设备变得越来越复杂,集成了新型传感器、人工智能和追踪功能,它们也在收集越来越多的数据。这迫使企业在拥抱新技术的同时,重新思考如何处理用户追踪、隐私保护和数据安全的问题。从洞察中获益,也面临风险XR设备收集到的深层用户行为数据对企业发展来说其实是一件好事。比如,通过分析用户的操作行为、面部表情、情绪反馈(来自肌电图EMG技术),企业可以更好地提升生产力、效率和培训效果。但与此同时,每一个新增的数据点都带来了合规性、隐私性和安全性方面的挑战。企业在迎接沉浸式办公新时代的同时,必须谨慎行事,确保始终遵循最新的法规要求。XR用户追踪:隐私、安全与合规的新战场我们已经远远超越了只能记录控制器按键操作的早期XR设备。如今像AppleVisionPro这样的设备能够追踪甚至记录生物识别数据;许多头显设备配备了手势识别和动作追踪传感器,以提升用户体验。此外,还有各种"附加设备"能收集更多深度信息。例如MetaOrion的EMG手环,就能捕捉非常细致的动作信号。根据你选择的技术工具,你的沉浸式系统可能具备记录以下内容的能力:头部朝向手势动作眼动轨迹瞳孔扩张用户环境的空间地图甚至基于微表情、语调和肌肉张力来判断情绪状态这些新的数据维度为业务创新打开了大门。例如,在虚拟现实销售培训中,系统可以通过眼动追踪判断学员是否直视客户虚拟形象,而动作传感器则可以分析哪些手势更具说服力。但随之而来的问题同样严峻。生物识别数据:机遇与威胁并存在用户追踪、隐私和安全方面,生物识别数据是一把双刃剑。一方面,它可以提升系统的安全性。例如,VisionPro的眼动追踪功能支持生物认证机制,使得外部人员更难访问设备或应用程序。另一方面,生物识别数据也可能被恶意攻击者截获。虹膜扫描、实时动作模式,甚至是心率等生理数据,都可能成为攻击目标。黑客有可能利用这些信息窃取个人身份、定位位置,甚至获取身体弱点信息,特别是在医疗健康领域。更严重的是,攻击者可能收集足够多的个人数据,用于生成深度伪造(deepfake)、劫持虚拟化身(avatar)或实施欺诈行为。手势与眼动追踪:便利与隐私的博弈手部和眼动追踪能力确实让XR解决方案在企业中更加高效。它们可以增强沉浸感、减少对控制器的依赖,甚至通过注视渲染(foveatedrendering)优化计算资源使用。同时,这些技术还能为企业提供大量有价值的数据,用于分析产品体验、改进教育成果或增强团队协作。但同样,这些数据的收集也带来了明显的隐私风险。加州大学伯克利分校的一项研究发现,仅需两秒钟的手部和眼动追踪数据,就足以帮助犯罪分子唯一识别出某个用户。这引发了严重的隐私担忧。企业合规性:日益复杂的监管环境随着XR技术的普及,遵守不断变化的数据收集与存储规定变得越来越困难。在欧盟,《通用数据保护条例》(GDPR)对企业如何收集、存储和处理个人信息提出了严格要求。其中,生物识别数据被视为"特殊类别",需要更高的保护标准和明确的用户同意。对于在XR环境中处理医疗或健康相关数据的企业而言(如使用虚拟现实进行患者治疗的医疗机构),HIPAA合规性也成为必须考虑的问题。随着XR越来越沉浸化,"个人数据"与"企业数据"的界限正在模糊,企业必须制定一套完善的策略,应对用户追踪与隐私管理的挑战。XR用户追踪隐私与安全的最佳实践随着设备和软件持续收集更多数据,企业不能再将安全与合规视为事后的补充措施。无论是投资混合现实、增强现实还是虚拟现实解决方案,还是使用触觉反馈配件或XR软件平台,都需要有清晰的规划。以下是如何优先保障XR用户追踪隐私与安全的几点建议:1.进行用户追踪隐私与安全评估从基础开始,识别最大的用户追踪隐私与安全威胁在哪里。根据你打算如何使用这些技术以及你所投资的设备类型,你需要了解:哪些数据会被头显和配件收集?数据存储在哪里?存在哪些潜在漏洞?绘制出你的重点区域。请注意,并非所有XR数据的敏感度相同。例如,在医疗行业中实时追踪生物特征可能比在培训模拟菜单中记录用户停留时间更具风险。根据评估结果,仔细考虑某些"用户追踪"功能是否应被启用。例如,在培训模块中使用触觉反馈是有意义的,但在日常协作会话中可能并不必要。2.实施强大的数据保护措施接下来,升级你的数据保护策略。利用先进的身份验证和访问控制选项,例如多因素认证(MFA)。使用主要XR厂商提供的企业级软件解决方案。例如,MetaforBusiness提供了设备使用监控、用户上下线管理以及数据控制等功能。在选择用于协作、培训或客户服务的XR应用时,确保所有信息在静止和传输过程中均加密。如果你使用云服务,请确保额外的安全措施到位。考虑采用隐私增强技术(PETs),如差分隐私(differentialprivacy)或设备端处理(on-deviceprocessing),以掩盖用户数据,防止原始生物识别资料离开硬件。例如,苹果强调其大部分面部和眼部追踪数据都在VisionPro上本地处理,减少了对外部共享的需求。3.制定严格的安全部署政策并开展员工培训人为错误始终是企业合规性的最大风险之一。在制定XR用户追踪隐私策略时,必须建立明确的政策,引导员工正确使用这些设备。运行模拟场景,比如在VR协作环境中出现可疑弹窗的"XR钓鱼尝试",并展示员工如何识别和报告这些异常行为。教育员工更新设备和软件的重要性(以降低数据泄露风险),并对他们透明地说明其数据的使用方式。还要确保每位员工都能快速应对突发情况。例如,一旦检测到数据泄露,所有成员都应该知道如何隔离受感染设备、上报问题并收集有用信息。4.匿名化与最小化数据采集用户追踪隐私的一条黄金法则是:只收集你真正需要的数据。不要记录和存储一切,那样只会增加风险。例如,在一个XR培训项目中,你可能不需要记录每一次目光焦点或微表情,只需要了解每个模块中员工的参与度即可。当你收集更敏感的数据(如生物识别信息或行为数据)时,考虑匿名化处理。这样可以在不保留大量个人可识别信息的前提下,获得有用的统计指标。此外,设定明确的数据保留周期。你不必永久保存所有数据--定期清理有助于缩小威胁面。正确处理用户追踪隐私、安全与合规随着扩展现实技术不断发展,我们所收集的数据量正以前所未有的速度增长。这既是机会,也是挑战。你收集的数据越多,就越能优化XR战略、解锁新机遇;但与此同时,收集和处理大量数据也必然带来隐私与安全上的风险。沉浸式工作空间仍然是工作空间,仍然受到严格规则和法规的约束。别让拥抱XR技术的大门,意外地为新的安全威胁敞开了入口。
如果说扩展现实(XR)头显正在改变我们的工作方式,那么当你开始为沉浸式体验添加"触觉反馈"时,真正的变革才刚刚开始。如今,越来越多的企业正借助可穿戴触觉技术提升培训、协作乃至产品设计等业务场景的效率。从手套到全身套装:触觉交互进入多样化时代如今的触觉反馈早已不再局限于VR手套。越来越多公司正在探索触觉背心、全身体感服、触感座椅、指环、腕带等多种形式的可穿戴设备,让虚拟世界更加"真实"。这些设备不仅丰富了用户对数字环境的感知层次,还带来了远超预期的实际效益,尤其是在与XR技术结合之后,其在企业中的应用潜力愈发显著。为什么触觉反馈对企业如此重要?随着XR技术在企业中的普及,沉浸式体验的价值日益凸显。例如,在虚拟会议室中与同事面对面交流,比视频会议更具沟通效率和参与感;现场维修人员通过远程专家实时指导操作设备,也变得更安全、高效;而利用XR进行产品设计,则能大幅缩短开发周期并降低成本。而加入触觉反馈后,这种沉浸感被进一步加强。例如:WEARTTouchDIVERPro手套可在用户接触数字物体时模拟重量、力度甚至温度;bHapticsTactsuit全身背心则能模拟全身触感,适用于需要高度沉浸感的训练场景。起初,触觉系统可能只是XR领域的一种"新奇配件",但随着其带来的实际效益逐渐显现,它正逐步成为企业XR生态的重要一环。提升用户体验与可访问性当数字环境具备三维触感--当你能感受到纹理、接收到振动提示数据时,整个体验就发生了质的飞跃。触觉反馈提升了用户的参与度和互动质量,从而带来更高的效率、生产力以及更快的问题解决能力。比如,在微软的ImmersiveSpaces会议中,当你能在虚拟白板上感受到笔的压力时,书写体验就更加自然。而在产品设计过程中,如果能够"触摸"到虚拟模型的细节,将大大提升设计精度。此外,触觉技术还能改善残障人士的工作体验。例如,通过震动或脉冲引导视障员工完成菜单操作、文档浏览等任务,使工作环境更具包容性和无障碍性。强化学习与培训效果沉浸式学习正在企业培训领域掀起一场革命。大量研究表明,使用XR技术进行培训有助于提高知识留存率、增强参与度、提升绩效表现,并加速技能掌握。而触觉反馈的加入,使培训仿真更加逼真,从而进一步提升培训成效。企业可以构建高度真实的虚拟训练环境,让员工在无风险条件下操作设备、应对复杂场景。例如:应急救援人员可以在模拟火灾环境中接受训练,感受高温与震动;医疗从业者无需依赖尸体即可练习手术操作,感受到手术刀的重量与组织的阻力。一项发表于美国国家医学图书馆的研究表明,在骨科钻孔任务中,配备触觉反馈的VR训练显著提高了学员的操作表现。这意味着,企业可以获得传统实操培训的优势,同时避免设备损耗与安全风险。提升职场安全性除了在培训中的应用,触觉设备还可直接用于高危作业环境的安全管理。例如,在制造业中,员工可通过触觉背心感知温度变化或接近危险区域时的提醒;在VR训练中,当用户靠近虚拟边缘或在化工厂误入泄漏区时,腕带或指环会立即振动预警。这些设备还可以收集员工的生理数据(如体温、心率等),实时反馈给管理者,帮助判断员工是否处于危险状态。结合像MetaOrion原型眼镜这样的智能视觉设备,这类触觉系统有望大幅降低事故发生率,并为企业提供改进培训策略的数据支持。增强团队协作体验尽管协作并不是人们最先联想到的触觉应用场景,但它同样能从中受益。例如,告别枯燥的视频会议,员工们可以在虚拟会议室中传递模型,并在交接时感受到重量的变化;在虚拟白板上写字时,也能感受到笔触的压力;同事轻拍你肩膀的"触感"也会同步传来。未来,触觉手套甚至可以让员工与远方的新同事"握手",增强情感连接。在汽车等行业,多名工程师可在元宇宙中共同操作零部件,实现真正意义上的协同设计。随着机器人技术和物联网的发展,我们甚至可以想象这样一个未来:团队成员可以通过手势远程操控机械臂和手指,无需出差就能完成复杂的组装任务。推动远程与现场作业革新在远程工作中,触觉技术的应用前景尤为广阔。技术人员可佩戴触觉手套远程控制千里之外的机器人,感受管道腐蚀程度或螺丝松紧情况。荷兰军方已尝试使用触觉系统在VR中教授新兵卫星接收器的组装方法,未来甚至可用于远程建造卫星。AMILab正与WEART合作开发一套系统,允许工作人员通过TouchDIVER手套控制机械臂,减少差旅成本,并降低进入高危环境的风险。从长远来看,触觉设备与机器人技术的结合,将极大降低现场作业的成本和风险,使更多员工能够在办公室内完成原本必须亲临现场的任务。展望未来:触觉技术将成为企业XR的标配尽管目前可穿戴触觉设备尚未像VR头显那样普及,但其在企业中的影响力正在迅速上升。随着技术不断进步,触觉系统将变得更加易用、经济、多功能,覆盖更多应用场景。未来,我们可以看到越来越多企业为员工配备触觉背心、手套和臂带,以提升效率、降低风险、优化培训流程,并让协作体验更加真实自然。如果你想了解更多关于触觉技术如何赋能沉浸式办公的内容,欢迎继续关注我们后续的相关专题报道。
《Lasertag》开发者在Quest3系列上实现"无感建模",绕过Meta房间扫描流程在当前主流的混合现实设备中,Meta的Quest3和Quest3S虽然具备房间扫描与场景网格生成功能,但在实际使用中仍存在一些用户体验上的痛点。而独立开发者JulianTriveri在其开发的多人混合现实射击游戏《Lasertag》中,尝试通过深度API实现了"连续场景理解"的新方案,有效绕过了Meta现有的房间设置流程。Meta房间扫描系统的两大问题Quest3系列支持用户对房间进行3D扫描,生成可用于混合现实应用的场景网格(SceneMesh),使虚拟对象能够与真实环境中的家具、墙壁等物理结构互动。然而,这一系统存在两个主要问题:需要手动初始化扫描:整个过程可能耗时几十秒到数分钟,用户需主动完成扫描动作,显著增加了启动应用前的操作门槛。静态建模无法反映环境变化:一旦扫描完成,场景网格即固定不变。如果之后房间布局发生变化(如移动家具或有人走动),除非重新扫描,否则系统不会更新模型。这些问题限制了混合现实体验的流畅性和自然度,尤其是在动态或多用户场景中表现尤为明显。深度API的潜力挖掘:从遮挡到碰撞检测为了提升体验,《Lasertag》选择不依赖Meta官方的场景网格系统,而是直接利用Quest3的DepthAPI--该接口提供实时的第一人称深度帧,用于判断物体之间的空间关系。目前公开版本的《Lasertag》已通过DepthAPI实现激光与真实环境的即时碰撞检测,并支持动态遮挡效果。而在beta测试版本中,Triveri进一步探索了更复杂的连续建模能力。实时构建3D体积纹理,模拟"全局感知"在beta版本中,开发者将每一帧的深度信息逐步融合,在GPU上构建出一个代表用户环境的3D体积纹理(VolumeTexture)。这种方式让用户即使没有直视某个区域,只要之前看过,系统也能推测其存在并进行碰撞判断。此外,Triveri还在内部实验中尝试将这些数据转换为网格模型,借助Unity的一个开源行进立方体算法(MarchingCubes)实现近似实时的三维重建。甚至在早期版本中,他还尝试让多台设备共享各自的深度数据,形成"联网高度图"(networkedheightmap),从而实现协同建模。尽管这项功能尚未正式上线,但其思路为未来多人混合现实协作提供了重要参考。为什么Meta不采用类似方案?值得注意的是,AppleVisionPro和Pico4Ultra等设备已经实现了类似的"持续建模"机制:无需初始房间扫描,头显会在后台持续更新环境模型。它们之所以能做到这一点,得益于硬件级别的深度传感器。而Quest3/3S则依靠计算视觉技术来推断深度信息,尤其在配合红外图案辅助的情况下。这种软件层面的深度推算不仅消耗大量CPU/GPU资源,还显著影响电池续航。这也是为何许多Quest应用至今仍未启用动态遮挡功能的原因。因此,虽然《Lasertag》的做法在技术上具有前瞻性,但也意味着更高的性能与能耗代价。这正是Meta目前尚未将其纳入官方场景网格系统的主要原因。Meta也在推进自动更新场景网格今年初,Meta曾透露未来计划让场景网格具备自动更新能力,以适应环境变化。不过从其表述来看,依然会保留初始扫描作为基准,而不是完全转向实时建模。结语《Lasertag》的成功实践表明,在现有硬件条件下,通过深度API实现连续场景理解是可行的。它不仅提升了用户体验,也为未来的混合现实应用打开了更多可能性。随着硬件和算法的进步,或许我们很快就能看到更轻量、高效的"无感建模"方案走向主流。
一名开发者正在测试Meta最近发布的PassthroughCameraAPI,并开发了一款混合现实足球应用程序,能够在虚拟环境中追踪真实足球的运动轨迹。这位开发者最近在Reddit上分享了他们使用Meta新推出的CameraAPI的初步实验成果。该项目旨在通过物体识别与追踪技术,将真实的足球融入到虚拟世界中,为用户提供一种全新的足球训练体验。一段简短的演示视频展示了这款应用的工作原理:虚拟目标被投射到一面真实的墙面上,当开发者踢出真实的足球并击中这些目标时,它们会在虚拟空间中"倒塌"至地面。这个演示展示了MetaQuest3摄像头系统如何巧妙地融合物理世界和数字内容--它能够识别现实中的物体(在这个案例中是一个足球),并将它们无缝整合进扩展现实(XR)体验中。MetaPassthroughCameraAPI:拓展混合现实工具包这款应用基于Meta最新发布的PassthroughCameraAPI(PCA)构建,该API随着MetaXRCoreSDK74.0版本一同推出。PCA提供了对Quest头显前置RGB摄像头的直接访问权限,从而解锁了更高级的混合现实功能。Meta表示,这款新API设计用于提升混合现实应用的质量,支持诸如物体识别等功能--这正是Reddit开发者在其足球演示中所展示的核心能力。经过一段时间的测试后,Meta正式发布了CameraPassthroughAPI,允许开发者将其应用发布至官方HorizonStore。除了上述足球实验外,immerGallery团队也为Quest3开发了完整的3D摄像头功能。目前,PCA仅支持MetaQuest3和Quest3S设备。每个摄像头可提供最高每秒30帧、分辨率为1280×960像素的画面。然而,由于存在40到60毫秒的延迟,在追踪快速移动的物体或细节方面仍面临一定挑战。这项技术的出现标志着消费级VR/AR设备向真正意义上的混合现实迈出了重要一步。未来,我们可能会看到更多结合现实与虚拟世界的创新应用场景出现,进一步丰富用户的交互体验。这一进展不仅展示了技术的进步,也预示着混合现实在日常生活中的广泛应用前景。
VR52网成立于2015年,平台提供VR头显、AR眼镜、配件外设、厂商、测评、行业资讯、游戏与应用、展会活动等。