近日,美国专利商标局公布了苹果公司的一项智能眼镜专利申请,该专利涉及眼镜形态,该眼镜具有一个环绕镜片的金属框架,并可能具有通过铰链与框架相连的镜腿。更重要的是,苹果智能眼镜中的射频收发器电路(如蜂窝电话收发器电路)可能与一个或多个天线相连。这些天线可能具有通过在金属框架中放置电介质填充间隙以将框架分成几段而形成的天线谐振元件。由金属框架段形成的天线谐振元件可以使用传输线耦合到射频收发器电路。苹果专利图6、7、8和9是一副智能眼镜的正视图,天线位于框架上的各个面部位置;图10是一副智能眼镜的示意图,其细长的侧面部分(镜腿或镜壁)包括天线。虽然这项专利看起来很简单,但它蕴含深意,证实了苹果正在为iPhone开发一个额外的外形设计:智能眼镜。
近期,科技巨头霍尼韦尔(Honeywell)在华盛顿举办的AUSA展会上展示了其最新的AR解决方案360Display。据悉,Honeywell360Display 是一款可穿戴显示器,采用了模拟自然视觉技术,可为在低能见度下飞行的飞行员以及需要在低能见度或危险条件下操纵的地面车辆操作员提供前所未有的态势感知,同时可有效防止晕动症等情况发生。该显示器的航空版是一种可穿戴遮阳板,它使用 AR为民用或军用飞行员提供高分辨率的360度视图,与驾驶舱外的视图无缝匹配。它还在飞行员视野中提供交通呼叫和飞行仪表,这使得 Honeywell360Display非常适合在夜间、恶劣天气或拥挤的空域飞行。该显示屏提高了安全性、飞行员信心和飞机实用性。加固型车辆的操作员可以使用显示屏在低能见度或危险条件下安全操纵。它通过提高能见度和减少在车辆中查阅仪器的需要,提高了整体态势感知、反应速度和生存能力。轻巧的头戴式显示器使用实时外部高分辨率摄像机馈送来创建无缝的混合现实视图,并为操作员在其直接视野内提供传感器信息。霍尼韦尔航空电子设备高级技术销售经理AdamGavrich指出:"我们配备了一项非常具体的技术,基本上可以让你的身体认为它正在用自己的两只眼睛看,它没有任何增强功能,这是我们系统非常特别的原因所在。"
凭借 PSVR2,索尼在今年年初对重要的VR生态系统进行了新的尝试。在 PSVR2 推出近八个月后,PlaystationStore列出了100多款 VR游戏。然而,任何关注过去几周 PSVR2 游戏发布的玩家都知道,几乎每个月都会有一两款大型VR游戏让粉丝失望。因为它们几乎没有图形优化且存在Bug,所以 PSVR2 的优势未被使用。第一个令人失望的是独家游戏《SwitchbackVR》,尽管被推迟了,但游戏画质仍然很糟糕。该工作室发誓要改进,三个月后发布了一个补丁,改进了游戏画质并修复了许多 Bug。另一个大型独家产品《FirewallUltra》也开局艰难。游戏大厅等待时间长,老式的VR设计和许多 Bug。自8月底推出以来,已经发布了六个游戏补丁。这表明工作室很活跃,但也间接表明游戏应该再推迟几个月上市。同月,生存冒险游戏《GreenHellVR》的PSVR2版本因低渲染分辨率和 Bug 而令人失望。同样,开发团队立即承诺了发布补丁来修复主要Bug。从那时起,已经发布了两个补丁,但到目前为止,游戏画质还没有显著改进。九月发布的《HellsweeperVR》在发布时遭受了画质问题,PSVR2 版画质甚至比Quest版本还要低。由于补丁,情况有所改善,但总体画质已受损。最近一款令人失望的 PSVR2游戏是10月初发布的《Project Wingman》,这是第一款允许玩家虚拟飞上天空的VR游戏,但不幸的是,只有六个视觉效果平平的VR任务,这显然发挥不出PS5强大的性能。游戏过早推出或Bug 破坏了买家对 VR 的兴趣。但好在 PSVR2游戏也有很多优秀示例,比如PSVR2独占游戏《Synapse》或移植版《SongintheSmoke》、《JurassicWorldAftermath》和《星球大战:银河边际传说》PSVR2版本在游戏画质和游戏体验方面均比其他版本要好,特别是《RedMatter1》和《RedMatter2》,两款游戏在画质和流畅度上都令人惊叹。在PSVR2发布半年后,《NoMan'sSky》收到了一个更新,将其带到了一个完全不同的游戏画质级别。但是这款游戏在发布时也以低渲染分辨率令人失望,也许该版本与更新内容同步发布效果会更好。
9月,华为手机销量重回第一;10月,问界销量逼近特斯拉。仅仅从这些来看,华为真的有要把两者按在地上摩擦的节奏,看起了着实无敌,可事实上并不是这样。再回领先先来看看华为在手机和汽车方面的业务发展。根据Counterpoint数据显示,经过短短一个月的时间,华为手机销量就从第五名跃升到第一名。这样的进步绝对是惊人的,况且这仅仅是Mate60这一个系列产品的成绩。在手机市场,压力自然转移到了小米OV身上,当然还有高端市场的直接竞争对手苹果。在汽车方面,华为搅动市场的能量同样是巨大的。昨天,问界汽车官方称,新M7上市首月累计大定突破60000台!余承东也发布微博,表示:正在加班加点,全力以赴搞交付。整条供应链新投入了超过10个亿,增加了2万多人保障高质量快速交付。一个月60000台,对于熟悉新能源汽车销量的同学来说应该知道,这意味着什么~根据乘联会数据显示,9月新能源乘用车批发销量排名中,排名第二的特斯拉销量为74073辆,排名第三的吉利销量为53692辆。而问界汽车单月60000辆,完全可以进入榜单前三,这还不包括赛力斯其他车型的销量。可见在华为技术加持下的问界,已经有了与特斯拉抗衡的趋势。因此,说华为在未来能够拳打苹果、脚踢特斯拉,确实并不多么夸张。不一样的选择那么华为为什么有如此的实力呢?个人认为,仅仅是因为华为投入在技术上的精力,比其他企业多了那么一点点。以搭载在问界新M7的华为高阶智能驾驶系统ADS2.0为例,华为采用了和特斯拉完全不同的"多传感器融合"的感知路线,在纯视觉的基础上引入了激光雷达,并且凭借独有的算法支持和大数据、AI训练,使得这一系统不断精进。虽然特斯拉在视觉感知路线上是绝对的王者,但这一方案的上限低。华为的感知路线在技术上更像是对特斯拉的降维打击。因此我们看到,华为在自动驾驶实战能力上的亮眼表现。凡此种种,华为总是在最基础的技术上着手,这是它区别于一众企业的最大不同。而这样的道路却并不是无法复制的,只是缺少愿意这样做的企业。总之,华为并不是无敌的存在,也并非天赋异禀,只是投入在技术上的精力,比其他企业多了那么一点点而已,而不是把精力放在挤牙膏上,也不是把手段都放在营销上,更是不把挣快钱作为企业价值。
10月12日,周杰伦2023嘉年华世界巡回演唱会在上海举行,演唱会上首发了周杰伦超写实数智人"周同学"首支元宇宙先导片《次元拓》,该片由中国移动、巨星传奇和好莱坞顶级制作团队维塔工作室三方合作打造,标志着国内企业在元宇宙场景拓展、数智人IP打造等方面的探索进入新的阶段。《次元拓》的背景设定在赛博朋克风格浓烈的8G时代,周杰伦与数智人"周同学"以音乐为媒介,运用中国移动能量塔的超级算力对抗异次元怪,上演了一场为现实世界与元宇宙世界的未来并肩作战,最终成功化解危机的故事。周杰伦还为影片量身定制了一首新曲,并亲自奉献钢琴演绎。《次元拓》中所谓的数智人,一般是指虚拟人、数字人进化的最终形态,最早被定义为进化了数智能力和手段的新人类。在元宇宙概念普及之后,数字人和虚拟人融合大数据、人工智能等前沿技术,将进化成为遵循人类的形态、行为、意识,依托数字技术构建而成,是元宇宙居民的核心成员。中国移动元宇宙布局中国移动是"周同学"数智人背后主要推动者,公司与周杰伦的合作始于20年前推出的动感地带业务,周杰伦是签约的第一个代言人,并发布了一首名为"我的地盘"的流行歌曲。中国移动与周杰伦在元宇宙领域的合作则始于今年5月8日,双方签署了在元宇宙领域的合作协议。签约活动现场,周杰伦介绍了中国移动为其打造的超写实数智人"周同学",并官宣"周同学"三重新身份--中国移动动感星推官、中国移动5G元宇宙星际开拓官、中国移动5G视频彩铃推广大使。彼时双方便宣布并将举办元宇宙演唱会。中国移动近几年在元宇宙领域的布局不可谓不广,中国移动执行董事兼首席执行官董昕去年在业绩会上表示,中国移动已提前布局元宇宙核心领域和关键环节,卡位新的产业层级和关键枢纽。具体应用层面业务聚焦咪咕视频、视频彩铃、云游戏、云VR、云AR等方向,不断进行元宇宙内容及应用领域的布局。此外,中国移动还成立了元宇宙产业联盟,整合了中国移动联盟、实验室、合作伙伴等生态体基础。巨星传奇与周杰伦"周同学"数智人背后的另一主角是今年刚上市的巨星传奇,该公司与周杰伦之间存在千丝万缕的联系。"周同学"由巨星传奇于2020年1月注册商标,最早定位是作为周杰伦的二次元化身,围绕"周同学"这一IP项目,公司在新零售领域开发了一系列合作。比如与泡泡玛特合作推出"周同学"系列手办潮玩盲盒,推出"周同学"联名特别版魔胴咖啡等等。巨星传奇成立于2017年,四位创始人分别为周杰伦母亲叶惠美、经纪人杨峻荣,以及多年工作伙伴陈中、马心婷。2021年,巨星传奇与周杰伦经纪公司杰威尔音乐签订了为期10年且可再续10年的IP授权协议。今年7月份,巨星传奇正式登陆港交所,发行价为4.25港元,截止发稿股价为8.6港元,涨幅高达100%。由于和周杰伦之间深度绑定的商业关系,被称为"周杰伦概念股"。招股书显示,巨星传奇的业务分为新零售、IP创造及营运,均与周杰伦紧密关联。截至2020-2022年,巨星传奇收入分别为4.6亿元、3.7亿元、3.4亿元,复合年增长率约58.4%;净利润分别为7560万元、4290万元、6490万元,复合年增长率约41.9%。巨星传奇透露,公司下一步将打造数智人元宇宙世界观,并围绕此世界观开展未来一系列内容IP,如音乐、电影及演唱会等。巨星传奇期待能最大程度地发挥其明星IP的优势,拓宽在元宇宙授权的可能性,丰富IP变现的方式。在发展趋势上,随着未来数字经济与实体经济深度融合,元宇宙中的产业有望实现全面升级,数字资产与实物资产则将实现数字孪生。元宇宙可能会推动个人逐步数字化,形成在数字世界的客观存在,从而形成个人的数字资产和数字身份。类似周杰伦和"周同学"这样的案例,有可能会重塑自我形象和身份体系。元宇宙中数字形象映射自我认知,数字身份大普及。设计属于自己的数字形象,往往是人们进入元宇宙做的第一件事。与此同时,数字人设计技术的不断精良,元宇宙带动下的资本投入不断增加,中国数字人行业市场规模或将持续增长。
自ChatGPT进入公众视野并引起热议的一年中,外界已经看到了数百种生成式AI工具的出现,这些工具旨在减轻员工的压力,使工作场所变得更加高效。但随着生成式人工智能工具的广泛兴起,与此同时关于人工智能被用于网络攻击的报道也在不断增加,安全和风险问题也随时受到越来越多的关注。其中,自动化假冒行为正成为一种日益严重的社会问题,不得不承认的是,生成式人工智能工具在一定程度上帮助了骗子使用假冒的社交媒体账号,与受害者建立联系并获取其个人敏感信息。据悉,安全软件Avast公司几天前在其官方渠道发布消息:该公司查获了一种借用ChatGPT来创建虚假恋情与约会的"恋爱骗局"软件--LoveGPT。Avast在原文中称"这个名为"LoveGPT"的最新骗局似乎正在欺骗那些寻找爱情的人。"根据Avast的最新研究发现,LoveGPT作为一款表面上为了帮助用户在网上约会时制作更有吸引力的个人资料和进行更动人的对话的工具,但事实上,自从LoveGPT整合了OpenAI的GPT语言模型后,它正在被骗子利用来实施自动化假冒行为。该公司指出,这种骗局已经存在了十多年,但最新的OpenAI集成将其提升到了一个新的水平,使用者很难分辨自己到底是与一个人还是一个机器人约会。目前已知受影响的应用程序包括AshleyMadison、Badoo、Bumble、Craigslist、DuyenSo、FacebookDating、likeyou.vn、MeetMe、OkCupid、PlentyofFish、Tagged、Tinder和Zoosk等等。据悉,在约会平台上,骗子们利用LoveGPT的自动化功能,规模化地创建虚假账号,并以看似真实的语言与受害者互动。这无疑给广大用户带来了新的挑战,这显然网络安全问题不容忽视,但对于用户来说,仅仅保持警惕,提高识别假冒行为的能力似乎还远远不够。在与用户进行深入互动的过程中,loveGPT运用了GPT-3和GPT-3.5的高级技术,以生成精准且富有情感的文字,描述个人资料,以及与用户的对话。这种基于语言模型的交互方式,无疑为这种服务增添了更多的人性化色彩,也更有可能欺骗用户的信任。LoveGPT的独特之处还在于,它可以根据不同的约会平台特点,调整提示词,以伪装成不同类型的用户。例如,在Bumble上,它可能化身为一位诗人,而在Zoosk上,它可能伪装成一位热衷于旅行的朋友。再加上它所具备的各种隐藏手段,使得LoveGPT在许多情况下,看起来像一个正常的约会网站用户。Avast网络安全专家表示,这一切都使得LoveGPT成为一个需要我们特别关注和警惕的工具。显然在约会时,对待初识的网友应持有谨慎的态度,即便对话看似真实,也不宜轻易披露个人的敏感信息,因为对方可能是通过AI操控假冒的身份。关于LoveGPT对OpenAI强大的语言模型GPT-3/GPT-3.5的应用让其具有生成自然真实对话的能力,这无疑为欺诈者提供了制造假身份的有力工具,使其有可能在网络约会平台上实施规模化的欺诈行为。因此除了对此加强隐私和资料安全的保护,更重要的是相关网络公司也应重视这种AI辅助欺诈行为,并采取相应的预防措施。
近日,《Daedalus》、《RedMatter》和《RedMatter2》背后的工作室 VerticalRobot在Reddit上举行了"AskMeAnything"活动。这三款VR游戏在各自的平台上都被认为是技术里程碑。特别是《RedMatter2》,它是 MetaQuest 2及 PSVR2 平台画质最好的游戏之一。经过七年多的密集VR游戏开发,VerticalRobot宣布了全新公告:"我们还不急于公开下一个项目,坦白说,我们仍处于头脑风暴阶段!我们相信花时间制作的游戏才能吸引玩家。"至于《RedMatter3》是否会到来还不确定:"我们喜欢《RedMatter》宇宙,但我们也愿意探索其他类型,为我们的玩家创造新的、令人兴奋的世界。我们还没有做出决定!"值得一提的是,VerticalRobot仅由两名开发者组成。对于《RedMatter2》,该团队暂时增加到四名全职开发人员和两名兼职员工,这对于这种规模和细节水平的游戏来说仍然令人不可思议。项目结束后,工作室缩减回了两人核心团队。多年来,该工作室得到了Meta及其OculusPublishing项目的支持。PSVR2的注视点渲染为《RedMatter1》和《RedMatter2》创造了奇迹,团队写道,这并不是一个必然的成功:开发人员在支持上工作了大约一个月,直到技术完美运行。VerticalRobot透露,《RedMatter》系列采用经过大量修改的虚幻引擎版本开发。根据开发人员的说法,《RedMatter2》的开发过程中确实优先考虑了Quest2平台。因为它的设计从一开始就考虑到了可扩展性,所以开发人员让游戏在更强大的平台上大放异彩是没有问题的,例如PC或PSVR2。
苹果最近在美国和中国香港申请了新一轮商标,涉及"RealityComposerPro"的图形版本等。RealityComposerPro图形徽标在visionOS中,苹果推出了RealityComposerPro,这是一款专业开发工具,可帮助开发人员撰写、编辑和预览3D内容。借助RealityComposerPro,开发人员可以创建身临其境的3D体验。本月早些时候,苹果申请了RealityComposerPro徽标,如下所示。苹果申请的这一商标属于第009类国际商标,涵盖:可下载的应用程序开发软件;可下载的计算机软件,即提供用于开发其他软件应用程序的虚拟对象库;用于制作动画和三维场景的可下载计算机软件,用于其他软件应用程序;可下载的虚拟现实软件;可下载的增强现实软件;用于导航虚拟现实和增强现实环境的可下载软件;可下载的计算机软件,用于使计算机和移动设备能够提供虚拟现实和增强现实体验。虽然苹果已经在美国和中国香港申请了"OpticID"商标,但苹果本周早些时候在中国香港申请了"Figurative"版本的OpticID,申请号为306371749。苹果申请的商标属于国际类别09和42,具体如下:09:计算机硬件;生物特征识别和认证装置;生物识别扫描仪;;生物识别虹膜扫描仪;计算机软件;生物特征识别软件;应用开发软件;用作构建软件应用程序的应用程序编程接口(API)的计算机软件;虚拟现实软件;增强现实软件;用于导航虚拟现实和增强现实环境的软件。42:计算机软件咨询;提供不可下载的应用程序开发软件;提供用于开发其他软件应用程序的不可下载软件;提供与计算机技术有关的信息;提供与计算机编程有关的信息;提供与计算机程序有关的信息;;在线提供计算机硬件和软件信息。
MetaXRSimulator通过减少佩戴头显的需要,使开发者开发MetaQuestVR和MR应用程序变得更加容易。如果将VR内容的发展与传统平面内容的发展进行比较,前者需要额外的付出:开发者必须一次又一次地戴上头显,而不是简单地看着显示器。MetaXRSimulator 旨在最大限度地减少佩戴头显的需求并减少迭代时间。借助新工具,开发者可以快速轻松地测试其VR应用机制、设计元素和用户体验,而无需实体头显。MetaXRSimulator 可以模拟各种MetaQuest设备和接口,使用键盘和鼠标或游戏手柄模拟头显运动和触摸控制器输入。MetaXRSimulator 可以模拟所选Quest设备的视场角和分辨率,使开发者可以根据显示器上的不同设备了解VR内容。MetaXRSimulator 还针对社交VR应用推出了解决方案:该程序可以在一台计算机上模拟多个VR用户,以便可以测试他们之间的交互。此外,MetaXRSimulator 还支持混合现实开发。为此,它会加载代表物理世界的人工环境,并模拟Meta混合现实界面,例如直通和空间锚点。尽管MetaXRSimulator带来诸多便利,但Meta在声明中强调,目前MetaXRSimulator还不能完全取代头显。MetaXRSimulator 支持Unity、Unreal和本机开发。
近日,苹果宣布其改进版的地图APP现已在丹麦和希腊推出。新体验提供了更多细节、改进导航体验、定制设计的热门地标3D模型、AR步行导航功能LookAround等。LookAround在iOS13中首次推出,也扩展到这两个国家/地区。LookAround在可用的城市提供3D街道级图像,它类似于谷歌地图的街景视图。如今,LookAround功能已经适配了英国、美国、日本等部分国家的热门城市,并在逐步扩展中。
在TheCodeConference的一次广泛采访中,Roblox 首席执行官 DavidBaszucki 详细阐述了其雄心勃勃的目标,即将 Roblox 平台转变为面向超过10亿日常用户的元宇宙平台。虽然Roblox在儿童和青少年中大受欢迎,但Baszucki旨在扩大其对所有年龄段用户的吸引力。他表示,Roblox增长最快的用户群体是17-24岁的用户,年增长率超过30%。与人们认为Roblox仅适合儿童的看法相反,Baszucki强调了其他年龄层用户的使用用途,成人用户正基于该平台进行社交和参与各种游戏;Baszucki还提到了机械师和铁路工人通过 Roblox 与朋友联系的例子,并指出Roblox可提供游戏以外的多元化体验。Baszucki的愿景远远超出了游戏。他希望Roblox发展成为所有形式的虚拟互动的"交流平台"。例如,他提到了虚拟音乐会、约会、购物之旅,甚至协作工作空间。为此,Roblox开始为其较大年龄层用户推出具有更成熟主题的体验。Baszucki预测,鉴于化身的匿名性,虚拟约会可能会在Roblox上起飞。该公司还利用人工智能工具来增强创作者的能力并生成沉浸式内容。虽然游戏仍然是Roblox业务的核心,但Baszucki认为这只是更广泛的"实用平台"中的一个方面。他认为,共享虚拟空间的元宇宙概念将从游戏扩展到社交、娱乐、商业和生产力用例。为了实现他每天超过10亿活跃用户的愿景,Baszucki希望在任何设备上都可以访问Roblox。他认为VR和AR在Roblox的未来中发挥着作用。
近日,苹果在欧洲公布了一项专利申请,涉及智能眼镜和VisionPro的视觉系统或新FaceID系统,该系统将允许FaceID与HMD上的摄像头配合使用,以解锁AppleWatch、iPhone、iPad和Mac等配套设备。用户认证设备的系统和方法苹果获得的专利解决了头戴式设备(如未来的智能眼镜)用红外滤光片部分或完全遮挡用户眼睛,从而无法使用人脸识别技术解锁iPhone等配套设备所带来的挑战。根据一个示例,本发明通过使用头戴式设备的板载视觉系统来解决并克服这些挑战,以基于伴侣设备的位置和用户的注视来确定用户是否正在注视伴侣设备,从而解锁设备。在示例操作序列中,佩戴带有红外滤光片的头戴式设备/智能眼镜的用户希望使用面部识别解锁配套设备,例如智能手机或平板电脑。用户可以定向伴侣设备,使得伴侣设备的视觉系统定位用户面部并开始面部识别序列。由于用户眼睛被红外滤光片遮挡,因此伴侣设备可能只能完成用户面部的部分匹配,不足以解锁伴侣设备。头戴式设备和伴侣设备可以交换电子通信或传输,以提示头戴式设备的视觉系统确定或检测用户的注视方向,例如通过面向用户的摄像头。用户的注视方向可以对应于用户正在看的内容或用户的视线。在一些示例中,这可以称为眼睛姿势(例如,确定眼睛看的方向)。眼睛的姿势或方向可以根据眼睛特征的位置来确定,例如瞳孔、虹膜、角膜、闪光和其他眼部特征。眼部特征的位置可以相对于头戴式装置、用户的眼睑或面部,或相对于眼睛的自然静态方向来确定。此外,头戴式设备和/或伴侣设备的视觉系统可以确定或检测伴侣设备相对于头戴式设备的位置,例如,使用第二个面向外部的摄像头。在某些示例中,单个摄像头既可以检测用户的注视方向,也可以检测伴侣设备的位置。一旦确定了用户注视方向以及伴侣设备的相对位置,系统就可以确定用户是否正在注视伴侣设备。也就是说,系统可以部分基于伴侣设备的位置来确定用户注视方向是否满足条件。用户注视方向满足的条件可以是用户的注视投向伴侣设备。在一些示例中,条件因此可以至少部分地基于伴侣或近似设备的位置。在某些示例中,如果注视方向朝向伴侣设备的位置,则满足条件。在一些示例中,当用户的注视方向在近似或伴侣设备显示器位置的预定阈值范围内时,注视方向满足条件。例如,如果注视方向在伴侣设备任何部分的5度以内也可以满足条件。在一些示例中,如果注视方向在伴侣设备的任何部分的1度以内,则确定用户正在注视伴侣设备。如果确定用户正在注视伴侣设备,则头戴式设备可以向伴侣设备发送信号。信号可以包含信息数据。例如,头戴式设备可以提供身份验证凭据来解锁伴侣设备。苹果专利图2C展示了具有板载视觉系统的智能眼镜。虽然该专利强调智能眼镜,但HMD可能是VisionPro的未来版本(或当前版本);图2B示出了带框架的智能眼镜的侧视图;图2A显示了伴侣设备(AppleWatch、iPhone、Mac)的用户身份验证系统。苹果专利图2D示出了智能眼镜#100c的注视和图像跟踪功能示例。具体地,图2D示出了用户不注视伴侣设备 #200的示例。苹果专利图2E示出了用户正在注视伴侣设备 #200的示例。响应于确定或检测用户注视的方向#241在伴侣设备位置的预定度阈值范围,可以确定用户正在注视伴侣设备,表明用户希望解锁伴侣设备。苹果专利图3和图4展示了用户身份验证的示例流程图。
近日,AR医疗可视化技术供应商、MagicLeap合作伙伴SentiAR宣布其CommandEP系统已获得第二个FDA510K许可。SentiAR的CommandEP系统集成了现有的3D心脏测绘系统,以创建一个实时的3D全息界面,为医生提供患者特定解剖结构的交互式、360度视图。据该公司称,这使医生能够更精确地进行心脏消融治疗(用于纠正心律问题的应用)。CommandEP系统兼容MagicLeap2,该头显由医生佩戴,除了实时心脏解剖结构和心脏导管位置外,还可以免提操作患者数据。以这种方式使用AR技术可让医生可以在心脏消融手术过程中更好地控制其数字工具。SentiAR首席执行官BerkTas表示:"我们很高兴通过新的集成获得了创新CommandEP技术的第二个510K许可。这一新的许可使我们能够继续扩大临床和行业合作伙伴关系。外科医生一直在寻找一种能够实时提供完整3D可视化,同时允许免提控制图像的工具,我们很荣幸能够为医生提供这一服务。"美国马萨诸塞州总医院Telemachus&IreneDemoulas家庭心律失常中心临床主任GregoryMichaud医学博士表示:"我们认为CommandEP系统非常有前景,外科医生能以完整3D可视化方式查看患者解剖结构,使我们能够识别目标并更有效地进行手术导航。随着新功能的开发,我们期待继续使用该系统。"SentiAR表示,预计将在今年晚些时候使用其CommandEP应用程序完成新的临床研究。
苹果正在开发的廉价版VisionPro 或将使用A系列芯片组,而缺乏EyeSight 功能。苹果首款头显Vision Pro 将于明年初推出,使用MacBook和iPadPro中也使用的M2芯片组,并具有透镜式前显示屏,以实现名为EyeSight的独特功能,该功能可使其他人看到头显用户脸部渲染视图。在WWDC23上宣布VisionPro时,苹果将EyeSight描述为该产品的"基本设计目标"。苹果人机界面副总裁AlanDye表示:"你永远不会与周围的人隔离开来。你可以看到他们,他们也可以看到你。"显而易见,M系列芯片组和EyeSight是VisionPro起价3500美元的主要原因。去年,苹果供应链分析师郭明錤声称苹果也在开发一款廉价(可能是非 Pro版本)的 Vision头显。今年早些时候,彭博社记者MarkGurman报道称,这款头显可能使用iPhone中使用的A系列芯片组。今年iPhone15Pro型号中的A17Pro配备了升级的 6核GPU,其功能约为M2GPU的60%,苹果可能能够在这款头显发布时缩小这一差距。如今彭博社称,廉价VisionPro 可能没有EyeSight显示屏,并且苹果已经"讨论了1500至2500美元的售价"。郭明錤最初声称这款廉价头显计划在2025年推出,但今年早些时候,《金融时报》报道称,它"不得不推迟",所以目前还不清楚苹果廉价头显的确切发布时间。除了廉价头显外,苹果还在开发一款高级VisionPro继任者。Gurman 表示,这款头显将继续使用M系列芯片组和EyeSight显示屏,但更小更轻,佩戴更舒适。Gurman 此前曾报道,一些VisionPro测试人员发现它太重,不适合长时间使用,据报道,解决这个问题是苹果下一代型号的首要任务。
近期,硬件DIY网站iFixit对Quest3进行了拆解,并了解了产品的内部构造,以及评估了硬件可维修性。与Quest 2相比,Quest3 面板薄了40%,这是通过使用 Pancake 镜片实现的,Pancake 镜片与显示面板之间的间隙要短得多。Quest3还配备了更大的电池(19.44Wh,而Quest2仅有14Wh),为其更强大的芯片组和传感器套件提供动力(包括两个彩色摄像头、四个追踪摄像头和一个深度投影仪)。iFixit拆解显示,Quest3更薄的面板和更大的电池的组合意味着,当前板被移除时,电池几乎占据了所有内部组件空间。考虑到Quest3重量为397g(不含面部接口或头带),因此电池重量约为四分之一。其他一些头显(例如QuestPro和PICO4),将电池装在表带的后方,以减轻头显的重量,AppleVisionPro有一个系留的外部电池,可以完全减轻头部的承重。iFixit去年也拆解了QuestPro。他们发现,QuestPro的空插槽正好适配Quest3的深度投影仪,该插槽应该有一个,但Meta在QuestPro发布前却将其移除。iFixit还表示,带状电缆甚至适合QuestPro主板上的连接器。最后,iFixit在可维修性方面给Quest3打了4/10分,给出的理由是缺乏维修手册、备件或维修设计意识。
近日,美国专利商标局公布了苹果一系列专利申请,涉及AppleVisionPro眼动追踪系统、光栅显示、手部追踪等当前和/或未来迭代。本报告涵盖的主要专利申请包括根据确定的闪烁位置确定眼睛特征(例如,注视方向、眼睛朝向等)的设备、系统和方法。苹果的眼动追踪技术是AppleVisionPro如此神奇的核心。苹果在其专利背景中指出,现有的眼动追踪技术分析从用户眼睛反射并通过图像传感器捕获的闪烁。例如,在这种图像传感器捕获的图像中描绘的闪烁可能会饱和,在这种情况下,相对强烈的闪烁从相对镜面反射,这种闪烁饱和可能会阻止现有的眼动追踪技术准确确定闪烁位置,因为饱和度可能会抑制准确测量闪烁质心(例如,闪烁中心点)的能力。这种眼动追踪系统可能缺乏准确性,并且对机械冲击很敏感。因此,可能需要提供一种有效的方法,例如,更准确地找到闪光中心点,对闪烁进行更准确的识别。使用多区透镜进行闪烁分析苹果的发明涵盖了基于确定闪烁位置来确定眼睛特征(例如,注视方向、眼睛朝向等)的设备、系统和方法。眼睛特征可以使用从眼睛反射并由图像传感器捕获的闪烁来跟踪或以其他方式确定。在某些方面,闪烁跟踪系统使用多区透镜,该透镜具有一个区域,可以分散在图像传感器处接收到的闪烁能量。分散能量可以改善眼动追踪,因为它能够使用从其他饱和场点的散射光(例如,在点散射函数中散射到光晕中的光线)更准确地识别闪烁中心点。此外,使用多区透镜分散能量可以进一步减少由透镜像差、光源功率、光圈偏心等引起的误差。一般而言,本发明的一个创新方面可以体现在以下方法中:在具有处理器的电子设备上,通过产生从眼睛的一部分反射的光来产生闪烁;在传感器处接收反射光,其中反射光在通过具有第一区和第二区的多区透镜后被接收,第一区和第二区具有不同的能量传播特性;根据传感器接收到的反射光确定闪烁的位置,并根据确定的闪烁位置确定眼睛特性。在某些方面,第一个区域的曲率半径与第二个区域的曲率半径不同。在某些方面,在点扩散函数(PSF)中,第一个区域的曲率半径比第二个区域的曲率半径更能传播接收到的光线。在某些方面,第一区的曲率半径通过分配其他饱和场点的能量在PSF中产生分布式能量部分。在某些方面,分布式能量部分是一个光环。在某些方面,第一个区域在点扩散函数(PSF)中产生分布式能量部分,第二个区域在PSF中产生聚焦能量部分。在某些方面,第一区域包括倾斜装置,使得分布式能量部分与PSF中的聚焦能量部分分开。在某些方面,确定闪烁的位置包括确定接收光的中心点。在某些方面,确定眼睛特征包括根据确定多个闪烁的位置来确定眼睛多个部分的位置。在某些方面,光是红外线(IR)光。在某些方面,传感器包括图像传感器,并且接收反射光包括从传感器接收来自图像数据的反射光。在某些方面,电子设备是头戴式设备(HMD)。苹果专利图3说明了饱和度对确定闪烁位置的影响;图4示出了根据某些实现方式使用透镜如何能够更准确地确定原本饱和的闪烁位置。苹果专利图8A-8C说明了用于眼动追踪系统的多区透镜示例;图10示出了用于眼动追踪系统的多区透镜的彗差示例。
VR52网成立于2015年,平台提供VR头显、AR眼镜、配件外设、厂商、测评、行业资讯、游戏与应用、展会活动等。