MetaOrion眼镜在2024年Connect大会上(理所当然地)引发了大量关注。它们承诺提供独特的EMG功能、卓越的视觉效果和最先进的追踪技术。然而,这些眼镜究竟能做些什么,将取决于另一个较少被提及的Meta项目:ProjectAria。ProjectAria简介ProjectAria于2020年9月首次宣布,相较于Meta最新的Quest头显和MetaAI解决方案等项目,它并未获得同样多的关注。但多年来,它一直在悄然塑造着Meta的扩展现实(XR)未来。通过ProjectAria进行的研究,已经帮助Meta收集了开发场景理解软件、新的3D建模能力等所需的数据。现在,随着Meta允许各类研究人员申请Aria开发套件,公司可能会以前所未有的速度加速创新。我们可能会比预期更早看到一个版本的Orion眼镜,其中包含我们在Connect大会上未曾见过的功能。以下是关于ProjectAria的一切,以及它对MetaXR路线图的意义。什么是ProjectAria?基础介绍ProjectAria是Meta在2020年推出的一个研究项目,旨在帮助其开发首款"可穿戴增强现实设备"。从广义上讲,这是Meta不仅仅专注于创建虚拟现实头显或如HorizonWorlds这样的软件的第一个证据。根据Meta的说法,ProjectAria为开发者提供了访问一对装满传感器的眼镜的机会(不带AR显示),帮助创新者从第一人称视角捕捉真实世界的数据。这确保了Meta能够收集到构建完全理解位置、上下文和意图的AR设备所需的数据。起初,Meta仅限少数行业合作伙伴和研究人员参与Aria项目。例如,在2021年,这家科技巨头与BMW合作,使汽车公司能够利用其技术将虚拟内容引入汽车中。自那时以来,Meta一直在探索AR技术的各种潜在应用场景,包括实时地图、导航能力以及培训和教育解决方案。ProjectAria的研究已经推动了以下技术的创建:-SceneScript:一种使用自回归AI结构化语言模型表示和推断场景几何的新技术。-EgoBlur:由Meta创建的一种增强型AI模型,用于保护XR中的隐私,自动检测并模糊图像中的个人身份信息(PII)。-EFM3D:一系列基于3D空间理解的新颖基础模型及其未来发展的基准。-ProjectAria无障碍性:将Aria带给每个人Meta长期以来一直允许少数人参与ProjectAria的研究。多个研究人员和学术团体贡献了开放研究"挑战",生成了新数据集。之前的挑战包括Aria日常活动(面向计算机视觉研究人员)和Aria合成环境。Meta甚至邀请研究人员帮助他们使用Aria传感器技术创建数字孪生。2024年,Meta首次向所有研究社区成员开放申请"Aria研究套件"(ARK)的机会。参与者仍需接受Meta的评估,以确保他们安全使用该技术(并用于相关应用场景)。然而,任何人都可以申请参与该项目,并获得以下资源:-MetaAria眼镜:内置电池、隐私开关、摄像头和七个麦克风的传感器眼镜,可以实时捕捉用户的眼动、位置、视频和音频等各种数据。-客户端SDK:允许开发者直接与Aria眼镜接口,创建自己的应用程序和功能,并收集数据。-云服务:机器感知服务为批准的研究伙伴提供各种基于云端的服务,如6自由度跟踪和3D眼动估计,确保用户可以利用MetaRealityLabs研究人员内部使用的算法和工具,加速开发过程。Meta如何利用ProjectAria研究套件?从一开始,Meta就利用ProjectAria快速收集数据,推动其在增强现实和人工智能领域的发展。然而,该项目最初仅供内部使用。现在,任何经过Meta批准的人都可以参与进来,为扩展现实空间和Meta未来设备的增长做出贡献。为了激励感兴趣的研究中心和合作伙伴充分利用这一机会,Meta公布了可能决定未来Orion眼镜特性的多个研究项目的信息。例如,基于最新的研究合作,Orion眼镜可能让用户实现:1.直接向专家学习 想象一下,您可以在增强现实中模仿专业人士的技能,立即了解他们如何移动并与现实世界互动,从而指导您的学习。布里斯托尔大学正在通过其ProjectAria研究专注于此。 该教育机构参与的"Ego-Exo4D"项目,正从高技能专业人士(如机械师、运动员、音乐家和厨师)那里捕捉"第一人称数据",探索他们如何与现实物体互动,以开发更直观的培训体验。借助这些见解,Meta可以创建高度沉浸式的AR应用,引导用户完成培训课程。例如,您可以实时看到厨师如何精确测量配料、添加到食谱中、准备特定食物等。2.更安全地驾驶 Meta长期以来一直对探索增强现实内容对驾驶员的好处感兴趣。正如前面提到的,BMW是最早获得ProjectAria访问权限的公司之一。现在,海得拉巴IIIT的研究人员正在此基础上开发新的解决方案。 使用ProjectAria,这些研究人员正在开发一个新的"驾驶员意图预测项目"。他们利用Aria眼镜上的外向和内向眼动追踪摄像头,以及其他车内传感器,来追踪驾驶员的目光。 借助捕捉到的眼动数据,研究人员可以在驾驶员需要额外提醒以保持道路安全时识别出来。例如,当行人突然闯入街道而您正在查看后视镜时,眼镜可以检测到您尚未看到他们,并发出警告。总的来说,该项目的目标是减少交通事故,让驾驶员在路上保持警觉。3.提升无障碍性 卡内基梅隆大学和爱荷华大学的两个额外的ProjectAria项目聚焦于无障碍性。在爱荷华州,研究人员使用Aria研究套件帮助听力损失者。他们利用眼镜中的麦克风阵列确定声音来源。 这些见解可以与增强现实眼镜上的提示或屏幕相结合,或者与助听器配合使用,以改善听力问题者的体验。卡内基梅隆大学的研究人员则利用ProjectAria帮助视力障碍者。 通过外部信标和眼镜内置的传感器,这些研究人员正在开发一个导航应用程序,帮助视力障碍者安全探索陌生环境,提供智能实时引导。用ProjectAria构建Meta的AR未来Meta对ProjectAria的持续投资及其决定向更广泛的研究人员开放技术访问,这对XR社区来说是个好消息。随着更多人获得Aria研究套件,Meta将获得更多的数据,这将有助于公司真正变革增强现实眼镜和软件。尽管难以预测这项研究是否会加快MetaOrion眼镜对公众的发布。毕竟,如果Meta希望确保这些眼镜不会价格过高,还需要做额外的工作。由于其超先进的组件,目前每单位Orion眼镜的成本约为10,000美元。然而,继续进行的ProjectAria研究应该会塑造Meta的增强现实眼镜。无论我们最终得到的是Orion眼镜的独特版本还是完全不同东西,Aria都将铺平道路。Meta的持续研究甚至可能意味着,Meta将开发出迄今为止市场上最先进、最用户友好且最强大的眼镜。
Looktech推出创新智能眼镜,配备语音AI和1300万像素摄像头,Kickstarter众筹价仅需200美元起产品亮点Looktech公司宣布了其最新的AI智能眼镜,这款眼镜结合了一个名为"Memo"的个性化AI助手,支持语音控制,并配备了1300万像素的摄像头。根据Looktech的说法,这个AI助手基于GPT-4、Gemini和Claude技术,能够从与用户的互动中不断学习。-激活方式:用户可以通过语音命令"HeyMemo"或按下一个AI按钮来激活眼镜,从而实现接听电话、播放音乐及通过语音控制各种任务。-相机功能:内置的1300万像素图像稳定摄像头可以拍摄高分辨率照片和2K视频。-电池续航:提供长达14小时的电池寿命。-连接性:支持蓝牙5.4和Wi-Fi6。-音频体验:采用开放式耳扬声器设计,配有降噪麦克风。-存储空间:拥有32GB内存。-镜框材质:TR-90材料制成的镜框重37克(不含镜片),提供多种颜色选择,并可搭配变色、偏光或处方镜片。Kickstarter众筹情况自12月12日在Kickstarter上线以来,《Looktech》智能眼镜为超级早鸟支持者提供了209美元的优惠价格,VIP支持者则可以199美元的价格购买。预计发货时间为2025年4月。在Kickstarter活动启动后仅仅一天内,该项目就达到了约18,000美元的筹款目标,实际上已经筹集到了接近74,000美元的资金。项目将持续到2025年2月5日,当早鸟名额用尽后,购买价格将恢复到常规的349美元。注重隐私保护Looktech强调个人数据保护,旨在吸引那些因隐私问题而避开类似Ray-Ban|Meta智能眼镜的消费者。所有传输的数据均使用TLS加密,存储的数据则采用了银行级别的AES加密技术。与ChatGPT交互前,所有数据都会被匿名化处理。此外,语音识别确保只有设备主人才能激活AI助手。合作伙伴与背景Looktech与温州瓯海眼镜有限公司合作生产这些AI智能眼镜,后者是一家拥有超过30年经验的眼镜制造商,每年生产大约2000万副眼镜。Looktech由浙江大学毕业生易浩翔(CEO)和童路瑶(CTO)创立,是生物传感器技术公司Entertech旗下的品牌。这款AI智能眼镜将在CES2025上首次亮相。通过此次Kickstarter众筹活动,Looktech不仅展示了其强大的产品吸引力和技术实力,也表明了市场对具备先进AI功能且注重隐私保护的智能穿戴设备的高度认可。
Meta宣布了雷朋Meta智能眼镜的三项新功能,这些功能将于今日通过v11更新开始推出:-实时人工智能:MetaAI现在可以访问实时视频源,查看实时人工智能会话期间您看到的一切,与您自然交谈,并协助您进行日常活动,例如准备饭菜、园艺或探索新社区。您可以回顾会话中之前讨论过的内容,提出后续问题或更改主题。-实时翻译:智能眼镜现在可以将口语在英语和西班牙语、法语或意大利语之间进行翻译。当您与说这些语言的人交谈时,您会通过眼镜的扬声器听到他们用英语说的话。或者,您也可以在智能手机上查看转录文本。-Shazam集成:如果您说"嘿Meta,用Shazam识别这首歌",眼镜就会为您识别这首歌。这三项功能仅供美国和加拿大用户使用。LiveAI和实时翻译仅通过早期访问计划提供,而Shazam集成功能正在向北美所有用户推出。欧盟推迟推出人工智能功能在欧盟,由于更严格的人工智能和数据保护法规,雷朋Meta智能眼镜的人工智能功能被推迟推出或根本没有推出。首批AI功能于11月在法国、意大利、爱尔兰和西班牙推出。从那时起,用户就可以通过语音命令与MetaAI交流,以获得常见问题的答案。视觉AI分析仍仅限于美国、澳大利亚和加拿大。
Xreal推出One(Pro):具有改进的光学系统、Bose音响和内部X1芯片的AR眼镜,可实现原生3-DoF跟踪。Xreal发布了XrealOne和OnePro。新款AR眼镜较前代产品有多项改进。核心是该公司自己的X1芯片。之前的Xreal型号(例如XrealAir2)上的显示屏始终跟随您的视线。对于固定显示屏和3-DoF跟踪,需要可选的XrealBeam配件。这现在应该已经成为过去了。原生3-DoF跟踪和更宽的视野有了X1芯片,任何联网设备(包括智能手机、笔记本电脑、手持设备或游戏机)都可以实现原生3-DoF跟踪。不再需要XrealBeam。据说该芯片的延迟极低,仅为3毫秒。据Xreal介绍,视觉效果也得到了改进。XrealOne使用两个索尼OLED微型显示器,每个显示器的分辨率为1,920×1,080像素。视野已增加到50度。在XrealAir2上,视野为46度。刷新率为120Hz,感知亮度为600尼特。两款眼镜都有四个按钮,您可以使用它们来调整亮度、访问屏幕菜单或使用调光功能来调整眼镜的透明度。XrealOne和OnePro支持AirCasting、BodyAnchor、SmoothFollow等多种显示模式,带来147英寸(3.73米)的空间屏幕体验,超宽模式下,曲面虚拟屏幕最大可达310英寸(约8米)。专业版的优点XrealOnePro重量为84克,视野更宽,达到57度,体积缩小了40%,据称可实现700尼特的更高感知亮度。为了覆盖尽可能多的目标群体,Xreal为OnePro提供了两种不同的IPD范围(瞳距)--57至66毫米和66至75毫米。XREALOneXREALOnePro价格$499$5993自由度支持3DoF,由眼镜供电支持3DoF,由眼镜供电芯片XREALX1芯片XREALX1芯片光学设计光学引擎3.0光学引擎4.0视野50°57°展示索尼0.68英寸微型OLED最新索尼0.55英寸Micro-OLED可调节镜片透明度3种模式电致变色调光3种模式电致变色调光高能见度(AR)通过德国莱茵TÜV新标准认证通过德国莱茵TÜV新标准认证解决400万像素,1080p400万像素,1080p最高刷新率120赫兹120Hz最高刷新率色彩准确度ΔE<3,个性化色彩校准
VR52网成立于2015年,平台提供VR头显、AR眼镜、配件外设、厂商、测评、行业资讯、游戏与应用、展会活动等。