惊艳众人的Vision Pro居然偷装了「电脑接口」？

苹果Vision Pro的横空出世，一夜之间在全球引来轩然大波。

正如库克所称，这将开启「空间计算」时代，足见 Vision Pro 对所有人来说意义非凡。

(相关资料图)

戴上Vision Pro，只需要削眉眼，捏合手指，甚至动嘴，「头号玩家」的科幻便成可能。

但是，苹果 Vision Pro 的科学幻觉，不仅如此。

头显发布后，苹果前研究员Sterling Crispin在推特考虑自己的工作中，透漏了不少关于Vision Pro的「黑科技」。

最让人惊艳的是，Vision Pro其实现还暗藏着一种「脑机接口」技术。

不需要芯片植入，它就能预测你的大脑运行为，妙妙的「读心术」。

此外，苹果头显还能根据个人身体和大脑的数据，来检测心理状态。

看起来篇幅不长的推文中，其实际上给了很多人对苹果 Vision Pro 带来无限的畅想。

Vision Pro暗藏「脑机接口」？

2018年，Sterling Crispin加入苹果技术开发小组，承担“神经技术原型”的研究人员。

3年前，他开始参与与Vision Pro的研究开发工作。

正像他在推特上所说的，自己花费人生10%的时间为Vision Pro的开发做贡献，这是我做过的最长的一次努力。

Crispin 在苹果的大部分工作中都受到保护协议的约束，设计广泛的主题和方法。

但实际上，这些工作，有些苹果已经申请了专利，可以拿出来讲。

Crispin称，“要使特定预测成为可能，触及很多技巧，我提到的少数专利对这样进行了详细说明。”

最酷的能力就是能够预测用户，会在他们现实点击之前，点击某东西。

而这项技术背后的主要原理是，每个人在做每件事之前，眼睛会做出来反应，其中部分原因是你预计在你点击之后会发生一些事情情。

因此，苹果可以通过算法来监视你的眼睛行事。

并实时重新设计UI，以创建更多这种预期的眼睛响应，从创建个人大脑的生物响应。

这其实就是通过眼睛现实的初级「脑机接口」。

Crispin表示，“这是一项出色的工作，也是我引以为豪的事情。随时都会接受输入性脑部技术。”

从中可见，苹果头显利用大量神经科学技术来开发其中的一些关键功能，完全可以确定一个人要做的事。

此外，Crispin称自己的工作很大一部分，渗及通过用户在沉浸式体验中的身体和大脑数据，来检测用户的心理状态。

毕竟沉浸在虚拟世界中的人们，真的很需要有一个健康测试的能力。

当你处在混合现实中，或者虚拟现实体验中，AI模型尝试预测你是否感到好奇、思维漫游、恐慌、注意力量集中、记起过去的历史或其他认知状态。

而这些都可以通过眼动追踪、脑部电流运动、心脏跳动和节奏、肌肉活动、大脑中的血液密度、血压、皮肤电流等测量数据来推测。

除了以上提到的技术，预测认知状态还包括你可能察觉不到的方式。

比如，向你快速闪光视觉效果，或者声音，然后测量你对这个的反应。

还有一项专利介绍了，如何使用机器学习，以及来自身体和大脑的信号来预测你的注意力、释放度或学习情况。

然后，头显会自动更新虚拟环境，以增强这些状态。

因此，你可以想像一个适合沉没式环境，它可以通过改变你在背景中看到和听到的内容，来帮助每个人学习、工作或释放松。

Sterling Crispin 介绍的这些和科技，或者我们可能足够在 VisionPro 未来升级中看到。

背面部分专利一览

支持发布会上魔幻表演的效果的，是苹果在默认开发VR设备这么多年中自己的技术积累。

5000多项VR专利，是发布会上惊艳人群产品和基石和护城河。

现在就来看看表演中涉及到的专业技术。

双手+意念控制一切

市面上几乎所有的VR设备都配备了手柄。

但苹果却胆大的在自己的第一款VR产品中就完全靠手追踪和眼球追踪实现了丝滑的控制效果。

后面的技术在2023年获得了专利。

根据专利图显示，图1是3D操作环境的框架图，展示了用户UI实现的整体框架。

图4是捕捉用户的手势输入的头显计算系统的手部跟随单元的框架图。

图5是用户的眼睛跟踪数据输入的头显计算系统的眼睛跟踪单元的框架图。

这个专利图例展示了眼球反光辅助眼球追踪的流程图。

除了提供和技术的基础基础基础基础之外基础之外之外还了了用户用户用户用户如何如何如何如何在如何如何在如何如何环境环境中环境更有效有效的

强大的手势追踪体验，还源于今年5月，苹果又获得了一项专利。

此项专栏描述了头显中的摄像头如何使用深度投影来区分不同的手势。

图注：FIG.7E/F/H/I 说明了相对于三维环境，基于用户在一个系列用户输入期间保持的手握力从并且可选择地面移动虚拟模拟对象或相对于三维环境（以及三维环境中的所有虚拟对象）移动视点维数环境。

一键生成3D图形

还记得之前被全网传输的小扎在地平线世界里的3D造型吗？

苹果给出的方案也可能部分解析了为什么一样是做VR设备，苹果能够引爆全网，Meta却让自己的股票「跌跌不休」。

后面的技术专利也在上个星期被公开出来。

这个专栏描述了未来的 Apple Watch 和 XR 头显将允许用户使用设备上的相机设置自己的 3D 头像的技术。

在专利的展示意图中，苹果展示了未来的 Apple Watch 允许用户使用 Apple Watch 背面的传感器拍摄自己的 Face ID 图像。

该传感器技术同样可用于 XR 环境。

无限画布

苹果发布会上展示的 Vision Pro 可以将一周的空间作为无限画布。

用户不仅可以随意使用任何APP，而且可以把它调成喜欢的任意寸。

苹果在2018年就申请了和这个功能相关的专项，这项技术让未来的XR头显提供用户在3D环境中编辑文档的功能。

如下图 Apple 的专利图所示。

另外一个相关专利是2021年获得的让佩戴XR头显设备（HMD）的用户可以查看显示器（Mac、MacBook或电视机）并根据需要进行虚拟扩展的技术。

收购AR初创公司Mira

其实，从申请多项专利可见，苹果在AR/VR领域的探索，计划已久。

最早可以回到2010年，苹果就收购了来自瑞典的面部识别技术公司Polar Rose。

在Vision Pro推出的后一天，就传出了苹果近期收购了Mira。这是一家构建轻量级AR头显的初创公司，还为美国军队提供服务。

根据Mira首席执行官Ben Taft在Ins上的帖子显示，作为收购的一部分，苹果已经聘请了至少11名Mira的员工。为Mira在苹果的下一篇文章感到兴奋。从宿舍到收购的7年旅行。

目前，具体收购金额未知，也不清楚Mira在苹果的增强现实路线图中扮演怎样的角色。

据2名前员工透露，苹果前设计主管Jony Ive曾一度承担这家初创公司的顾虑。

Mira于2016年由Ben Taft创作，总部位于洛杉矶，一直在为全球客户制作AR头显，包括任天堂在日本环球影城中的主题公园。

本家初创公司已筹备了约1700万美元的资金，包括蓝熊资金、幸运投资和红杉资金在内的投资人。

而苹果在Vision Pro中展示出来的很多技术，也源于一次成功的收购。

比起一些手势和空间定位的专长，就是通过收购了总位置在蒙特利尔的VRvana获得的。

头显「iPhone时刻」到，还需要5年

苹果推出的 Vision Pro，预示着它的下一个时代即将到来。

这款头显标志着苹果首创了一个全新的计算平台，可取现拥有的大部分主要产品。

虽然管iPhone蚕食了iPod，iPad威吓了Mac。但是，还有哪个苹果产品类别能同时击垮前3个主要细分市场。

彭博报道称，想让Vision Pro成为iPhone的替代品，至少需要5年的时间。若要成为杀手级产品，可能需要付出更多的时间。

比如今天，Vision Pro售价3499美元，价格高且不说，不能与手机互联互通，甚至不能打电话。

而设计还是太过重，而且必须随身安装一个外置电池组，只有2小时电量，无法长时间使用。

但在接下来的几年里，苹果能够解决这些问题，并推出一款“无法”的设备。

表面来看，Vision Pro看起来就像是一个为有钱人，或者那些对科技新品有无限需求的人而定制的「高价玩具」。

但是，苹果在WWDC上也竭力表现，这是每个人的设备，从办公室、到娱乐、视频、出行等方面。

不过，这并不太可能。

苹果在 iPhone、MacBook 等产品的更新向世人展示了自身的潜力。

进而，Vision Pro及其更先进的后续产品的发展价值，也将变得更加清晰。

其实还有一点是，Vision Pro并不像iPad或iPhone一样容易上手。而且每个人戴上头显还可能会有沉没体验的不适感。

不过，随着时间的推移，人们便会喜欢这种全新的「空间计算机」，就像戴副眼镜一样。

通过Vision Pro，苹果展示了自己正朝着将计算设备体积缩小到最小、最轻便的未来努力。

但这可能是一条漫长，而崎岖的道路。

不过，至少在一周的2个小时里，对数百万果粉来说，这款头显让他们终于见证了Vision Pro的到来。

或者也许有一天，我们可能会戴上 Vision Pro，观看 WWDC 2030。

编辑/lambor