繁
Valve创始人GabeNewell的脑机接口公司StarfishNeuroscience：打造下一代神经芯片，通向"矩阵"更进一步Valve创始人GabeNewell所创立的脑科学公司StarfishNeuroscience（海星神经科学）近日宣布，正在开发一款专为下一代微创脑机接口设计的定制芯片。这项技术不仅令人惊叹，而且可能比我们想象的来得更快。与imec合作：打造超低功耗、微型化神经芯片该公司在其官方博客中更新了项目进展，表示正与全球顶尖研发机构imec合作，共同开发一种超低功耗的定制神经芯片。这款芯片的目标是支持未来的无线、无电池脑植入设备，能够在多个大脑区域同时读取和刺激神经活动--这是治疗涉及"神经回路级功能障碍"的复杂神经系统疾病的关键能力。这也是GabeNewell在此前多次演讲中提到的所谓"读写"能力（readandwrite）的技术基础。MikeArmbinder（左）和GabeNewel（右）|图片由Valve提供突破当前微创脑机接口的瓶颈目前市面上的微创脑机接口技术，通常存在几个问题：体积大、功耗高、难以在多个脑区扩展部署。例如，2023年获得FDA批准的Neuralink，主要聚焦于对大脑运动皮层的单一区域干预。而Starfish的目标是通过微型化设计，降低手术负担，使得植入物可以轻松部署在多个脑区，实现更广泛、更精细的神经调控。尺寸仅2×4mm！GabeNewell的"脑芯片"来了这款芯片的尺寸仅有2毫米×4毫米，堪称微小。如果你曾想象过从一个由Valve创始人创办的公司手中看到一张"脑芯片参数表"，欢迎来到未来。以下是Starfish首代神经芯片的核心规格：低功耗：正常记录状态下总功耗仅为1.1毫瓦微型封装：采用0.3mm引脚间距的BGA封装双模功能：支持神经信号记录（如神经元尖峰放电和局部场电位LFP）与电刺激（双向脉冲）32个电极位点，其中16个可同时记录，采样率高达18.75kHz1个电流源，可在任意一对电极上进行刺激内置阻抗监测与电压瞬态测量功能片上数字数据处理与神经尖峰检测，使设备可通过低带宽无线接口运行基于台积电55nm工艺制造仍处于早期阶段，现招募合作方尽管这一项目尚处于早期阶段，但Starfish表示已开始寻求早期合作伙伴，尤其是那些专注于无线供能、通信协议及可植入神经设备的研究者和工程师，以探索该芯片在未来应用中的可能性。据称，该芯片预计将在2025年底前面世。GabeNewell："我们离'矩阵'比你想象的更近"正如GabeNewell多次强调的那样，这项技术的潜力远不止医学领域。早在2023年接受IGN采访时，他就曾大胆预测："我们离《黑客帝国》（TheMatrix）描述的那种体验，比人们想象的要近得多。"他解释说："连接人的运动皮层和视觉皮层，其实比很多人预想的要容易得多。比如，读写一个人的运动皮层，是一个相对可控的问题，但让人感受到'寒冷'这种感觉却要复杂得多。""我以前也没想到这一点。事实证明，你的大脑对某些功能有非常好的接口，但对其他感知机制的设计却非常混乱，甚至牵扯到免疫系统参与温度感知。这说明冷感的神经路径异常复杂，而运动皮层或视觉皮层则更容易被理解和操控。"Valve曾展望脑机接口如何改变游戏体验早在2019年，在GabeNewell还未完全退出Valve日常运营之前，该公司首席实验心理学家MikeAmbinder就曾在GDC上发表题为《脑机接口：游戏未来的可能方向》（Brain-ComputerInterfaces:OnePossibleFutureforHowWePlay）的主题演讲。他在演讲中指出："我们可以测量玩家对游戏中各种刺激的反应。虽然目前的数据获取还不够稳定，但我们已经开始摸索方法。试想一下，你想了解玩家的哪些状态？这个清单非常长，而借助现有的技术、分析手段和实验方法，我们已经可以获取其中相当一部分信息。"他所描绘的未来，正是如今Starfish正在努力实现的方向：将人类意识直接接入虚拟世界。
Varjo的讽刺纪录片《VRISDEAD：超越元宇宙的故事》揭示8个有趣的非消费级VR/混合现实应用芬兰公司Varjo最近推出了一部名为《VRISDEAD：超越元宇宙的故事（VRISDEAD-StoriesBeyondTheMetaverse）》的30分钟纪录片。片名颇具讽刺意味--尽管标题为"VR已死"，但整部影片却恰恰展示了VR和混合现实（MR）在专业领域的强大生命力。Varjo是一家专注于高端PC连接式头显的公司，其产品以极高的中央视场角分辨率和高质量的透视混合现实功能著称，主要面向企业与政府用户。目前最新产品是2023年底发布的XR-4系列，标准版售价3990美元，配备自动对焦摄像头的XR-4FocalEdition则高达9990美元。因此，这部纪录片中提到的8个案例全部使用Varjo头显，也就不令人意外了。虽然影片开头那段略带讽刺意味的关于"消费级VR已死"的评论我们并不完全认同，但从Varjo的立场来看，重点展示其产品的核心市场--企业和军用领域，是非常合理的。事实上，许多从事企业级XR解决方案的公司都对整个行业过于强调"消费者接受度"作为衡量成败的唯一标准感到不满。以下是该纪录片中介绍的8个值得关注的专业级VR/MR应用案例：🚗汽车设计（本田Honda）在汽车开发早期阶段，传统上需要制作大量昂贵且耗时的物理样车模型。而如今，位于加州的本田团队正在使用混合现实技术来评估新车的外观与内饰设计方案。借助VarjoMR设备，设计师可以在虚拟空间中直观地查看车辆比例、材质效果等细节，大幅提升了设计效率和协作能力。🏗️建筑设计（KPF建筑事务所）纽约知名建筑事务所KPF使用VR技术，在建筑物尚未建成之前，就能"走进"设计图纸中的空间进行沉浸式体验。"我们希望尽可能减少现场施工问题，有人戴上头显后就会意识到比例不对劲，或者发现实际效果和想象中的不一样。"此外，KPF还利用VR与分布在美国乃至日本的办公室团队远程协作，无需出差即可完成设计方案评审。🛫军用飞行员训练（ColeEngineering公司）ColeEngineering利用混合现实将真实的飞机驾驶舱与虚拟环境结合，用于培训美国军方飞行员操作各类战机。他们强调这套系统具备"可移动性"和"前线部署能力"。更值得注意的是，Varjo头显还被用于全球首个获得美国联邦航空管理局（FAA）认证的VR飞行模拟器，以及一项用于训练乌克兰飞行员操作北约国家提供的F-16战斗机的模拟系统。🛡️军用车辆训练（BohemiaInteractiveSimulations）BohemiaInteractiveSimulations是知名游戏开发商BohemiaInteractive（代表作《武装突袭》《DayZ》）的姊妹公司，两家共享同一套引擎架构。该公司提供多种军事训练解决方案，包括桌面端和平板设备，以及混合现实应用。在这部纪录片中，他们重点介绍了两个MR场景：第一人称视角的装甲车辆操作训练；以沙盘形式进行战术规划演练。"传统的穹顶式系统虽然能实现全方位视觉，但所需的空间、成本和维护都非常高。而现在只需戴上头显，你就拥有了一个'戴在头上的360度穹顶'。"🏥军事医疗训练（BlueRoomSimulations）澳大利亚皇家空军医疗单位BlueRoomSimulations正在使用混合现实技术，训练医生、护士和急救人员在战场环境下实施紧急救护。"我们的任务是对所有加入空军的医务人员进行基础培训，并帮助他们把民用医学技能转化为适用于战场的实战能力。"⛵海事培训（ForceTechnology）丹麦ForceTechnology公司正使用混合现实技术，培训民用船只的船长如何驾驶大型集装箱货轮。"现在你可以在本地办公室直接接受训练，而不需要专程前往实体模拟中心。"这种灵活性大大降低了培训成本，同时提升了教学效率。📊指挥中心可视化（HeadwallTechnology）HeadwallTechnology利用混合现实软件替代传统的多显示器指挥中心布局。"过去要占用一面大屏幕墙或八到十八块显示屏的空间，现在只需一副头显就能实现同样的信息呈现。"这不仅节省了空间，也提高了信息整合与交互的效率。🧠脑机接口研究（OpenBCI）脑机接口（BCI）研究机构OpenBCI曾长期使用ValveIndex头显进行实验，但在2022年转投Varjo怀抱，特别看重其内置的眼动追踪功能。"VR和AR是非常理想的实验平台，因为它可以让人置身于高度逼真的环境中，同时又能像实验室一样精确控制变量。"这对BCI技术的研究与验证起到了极大的推动作用。🔚结语：VR在消费市场之外，依旧生机勃勃尽管"消费级VR是否已死"是一个值得探讨的话题，但Varjo的这部纪录片清晰地表明：VR和MR技术在企业、军事、科研等领域依然充满活力。这些专业应用场景不仅推动了硬件性能的提升，也为未来消费级产品的进化提供了宝贵的技术积累。
苹果近日宣布，其visionOS系统将在今年晚些时候获得对脑机接口（BCI）输入设备的支持，首家合作公司为Synchron。苹果表示，这些BCI设备将通过一种全新的BCIHID协议进行支持，并作为iOS、iPadOS和visionOS中SwitchControl（切换控制）功能的一部分进行激活。这一消息发布的同时，苹果还宣布了其他即将登陆VisionPro的新无障碍功能，包括：透视画面放大功能通过本地AI技术对视野中的内容进行描述、识别和阅读的功能（LiveRecognition）SynchronStentrode：首个支持苹果协议的BCI植入设备据BCI公司Synchron透露，其旗下产品Stentrode脑机接口植入体将成为首款支持苹果新协议的设备。Stentrode自2019年起便开始临床试验，是目前全球首个无需开颅手术即可植入的永久性脑机接口设备。它通过颈静脉插入，最终定位在大脑运动皮层附近的血管中，实现对神经信号的读取与解码。实际应用案例：ALS患者用"意念点击"操控VisionPro早在去年8月，Synchron就曾演示过Stentrode如何替代传统的"捏合操作"来控制AppleVisionPro--虽然当时尚未获得官方支持。一位患有肌萎缩侧索硬化症（ALS）的用户通过眼球追踪选择界面元素，并通过"想象点击"的方式完成操作。今年初，Synchron更与NVIDIA合作，展示了另一位ALS患者如何借助AppleVisionPro使用Stentrode控制智能家居设备，如音响、风扇和扫地机器人。那次演示似乎利用了VisionPro的穿透式摄像头访问权限。但目前，苹果仅允许部分非公开的企业级应用使用该功能，并需获得苹果的特殊授权。官方支持来临：BCI成为正式输入方式随着苹果即将推出的BCIHID协议，Synchron的Stentrode将成为visionOS上官方认证的输入设备之一。这意味着拥有该植入设备的用户可以更轻松地在VisionPro上完成点击操作。对于行动受限严重的残障人士而言，这种结合眼动追踪选中+非侵入式BCI点击的交互方式，将成为XR设备上理想的输入系统。未来几年，随着越来越多独立头显内置眼动追踪技术，我们预计这类"眼动+脑控"的组合操作方式将在无障碍领域得到广泛应用。📌结语AppleVisionPro支持脑机接口，标志着消费级空间计算设备迈入了一个全新的交互时代。这不仅是对无障碍设计的重大突破，也为医疗科技与消费电子融合提供了范例。随着更多厂商加入这一生态，脑机接口有望从实验室走向大众市场，真正赋能每一位用户。
