近期，一份关于苹果新专利的信息引起了业界的高度关注。这份创新性的专利提出了全新的交互方法，通过一款专门的手指设备，用户可以更加直观地在虚拟世界中进行操作，进而提升整体沉浸式体验。该设备的核心技术是利用肢体追踪器获取追踪数据，使得用户在虚拟世界中可以看到物理表面以及一个与系统生成的触控板分离的内容操作区域。这一设计有望引领xR设备设计的新潮流，解决长期以来困扰行业的设备成本和用户沉浸感等问题。据美国商标和专利局（USPTO）公布的一份来自苹果的专利文件显示，该公司计划通过一款手指设备与Vision Pro相结合，实现更具沉浸感的 人机交互体验。在此次专利文件中，苹果详细阐述了一种通过肢体追踪器获取追踪数据的方法，使用户在Vision Pro中可以看到物理表面，以及一个与系统生成的触控板分离的内容操作区域。这一设计理念或将为xR设备的设计带来新的启示，并解决一些长期存在且未得到有效解决的问题，例如设备成本和用户沉浸感等。值得注意的是，过去许多产品在推广过程中往往忽视了交互体验的关键因素，如触感反馈等，而苹果此次专利文件的披露有望改变这一现象。

在Pro设备上,苹果利用摄像头和相关传感器来捕捉用户的手部和眼球动作,并通过M2和R1芯片进行处理,以实现更精确的控制。虽然这是目前较为优秀的一种解决方案,但也存在一些局限性。其中一个最大的问题是成本,因为需要多个摄像头和专用芯片来确保交互体验,这将增加成本。因此,采用专利中提到的外围配件可以让Vision Pro的成本大幅降低,并帮助用户更好地接受这种产品。

目前Vision Pro面临的一个问题是交互和手部动作监测。特别是通过摄像头监测手部动作,需要在没有遮挡的情况下进行交互,这可能导致某些场景下的交互受到限制。通过使用像手套这样的附件,可以消除由于纯粹视觉监测所带来的误差,甚至有可能提高精度,实现类似于Apple Watch上监测双指捏合等微小控制手势的效果。

然而,像手套这样的高精度专用设备可以降低Vision Pro的成本,但本质上只是一种成本转移方式,用户对其接受程度还需要市场检验。值得注意的是,虽然曝光的苹果新专利可能会降低XR头显的成本,但这反映了困扰这类设备已久的交互反馈和沉浸式体验等问题。目前主流的XR头显通过手柄来进行交互。

在过去，XR头显主要从视觉和听觉角度出发，以提供更佳的沉浸感。然而，如果仅关注这两方面，显然不能称之为完全体。例如，缺乏触觉可能会让用户感觉“出戏”，从而降低交互效率。尽管厂商在这方面已经做出了很多努力，但至今XR头显仍然高度依赖各种手柄进行交互，并通过震动来代替真实的反馈。这无疑只是一种权宜之计，离真正的沉浸式体验仍有较长的距离。

而像苹果专利中曝光的手套、指套等扩展设备，却能实现“一石二鸟”。它们可以打破由现阶段动作捕捉带来的交互限制，如苹果的专利就是通过指套实现六自由度（6DOF）跟踪手指动作，并将相关信息反馈给Vision Pro，即使手指部分被物理遮挡，也能继续接收动作数据。厂商还可以轻松地将具有触觉反馈功能的部件附加到手套中，甚至可以通过适当的调整，实现既不离真又不离幻的沉浸式体验。

虽然这种设计会让用户在真实与虚拟世界中“进退两难”，但实际上许多厂商已经具备了相关的技术储备。之前苹果就已经公开了一项关于手套的专利，该专利展示了手套内部传感器的应用，可以通过对指骨的定位，实现电容式触摸和手指间的接触感知。例如，当用户点击虚拟世界中的某个“悬浮”面板时，力反馈装置可以向用户回馈类似点击物理表面的触感，从而产生“坚硬”或“柔软”的感觉。

目前，用户在虚拟世界中点击的效果主要通过点击时的涟漪显示效果、手柄的震感，或两者结合的方式实现。相比之下，前者能带来更优质的体验。在苹果的另一项相关专利中，描述了一种类似于半包裹结构的指套，但其能让指尖底部露出来，使其依然具备感知真实世界变化的能力。这种设备内含了力传感器、加速度计、陀螺仪、光学传感器、触摸传感器以及状态指示灯等元件，将利用电容传感技术和其他方法，精确地确定用户移动手指和物体表面交互的方式。它不仅可以对应虚拟现实（VR）或增强现实（AR）设备的触觉输出，还能像Apple Watch一样提供触觉反馈，甚至可以帮助用户感受到“物体表面的不同触觉”。

苹果基于混合现实的解决方案专利示意图。此前，苹果公司发布Vision Pro时，CEO库克曾表示，基于虚拟现实的元宇宙概念对普通用户来说过于复杂，用户不应被鼓励长时间沉浸在虚拟世界中，以免与现实世界脱节。因此，这种至少保留一定感知真实世界能力的配件可能会成为苹果弥补这一缺陷的解决方案。

然而，由于XR领域的厂商长期以来过于自信，或者因为技术上的局限，这类产品的用户体验仍然存在一些不足。因此，除了现有痛点之外，用户体验的持续优化也必将成为这些产品在未来大规模应用的关键因素。