昨天，美国专利商标局正式向苹果公司授予了一项与 Vision Pro 有关的专利，更具体地说，是与 visionOS 有关的专利。
在苹果公司的专利背景中，他们指出，与至少包括一些虚拟元素的环境（如应用程序、增强现实环境、混合现实环境和虚拟现实环境）进行交互的方法和界面是繁琐、低效和有限的。
例如，一些系统不能为执行与虚拟对象相关的操作提供足够的反馈，一些系统需要一系列输入才能实现AR环境中的预期结果，还有一些系统对虚拟对象的操作复杂、乏味且容易出错，给用户造成了巨大的认知负担，并影响了VR/AR环境的体验。此外，这些方法耗时过长，从而浪费能源。对于由电池驱动的设备来说，后一种考虑因素尤为重要。
苹果公司获得的专利主要涵盖了用于苹果公司空间计算设备（称为 Vision Pro）的 visionOS 的各个方面。在某些实施例中，计算机系统具有一个或多个眼动追踪组件。在某些实施方案中，计算机系统具有一个或多个手部追踪组件。
苹果公司指出，电子设备需要有改进的方法和界面来导航和与用户界面交互。这种方法和界面可以补充或取代在3D环境中与用户界面交互的传统方法。这些方法和界面可减少用户输入的数量、程度和/或性质，并产生更有效的人机界面。
在一些实施例中，用户通过手指接触和手势、眼睛和手在空间中相对于图形用户界面（GUI）或用户身体的移动（由摄像头和其他移动传感器捕获）以及语音输入（由一个或多个音频输入设备捕获）与GUI进行交互。
在一些实施例中，电子设备至少根据检测到的用户注视在用户界面之间导航。在一些实施例中，电子设备可增强与用户界面控制元件的交互。在一些实施例中，电子设备以协调的方式滚动显示类别和子类别。在一些实施例中，电子设备以不同的方式从具有不同沉浸程度的用户界面向后导航。
这些系统、方法和GUI为电子设备与3D环境中的对象进行交互和操作提供了更好的方式。3D环境可选地包括电子设备物理环境中的一个或多个虚拟对象、一个或多个真实对象的表示（例如，显示为真实对象的逼真表示或通过显示生成组件的透明部分对用户可见）和/或3D环境中用户的表示。
在一些实施例中，电子设备至少基于检测到的用户眼睛注视在用户界面之间导航。在一些实施例中，电子设备响应于检测到用户在预定的时间阈值（例如，0.1、0.2、0.3、0.4、0.5、1 秒等）内对各自用户界面元素的注视，导航到与各自用户界面元素相关联的用户界面。
在一些实施例中，当检测到用户在将目光投向各自的用户界面元素时用手做出手势，电子设备会在少于预定时间阈值的时间内导航到用户界面。
无论是仅根据注视导航到用户界面，还是根据用户的注视和手势更快地导航到用户界面，都提供了以更少的输入或更短的时间导航到用户界面的有效方法。
在一些实施例中，控制元件包括可选择的选项，当选择这些选项时，电子设备会在包括控制元件的用户界面中执行操作。例如，控制元件包括一个导航栏，导航栏包括可选选项，用于导航到用户界面的不同页面。
在一些实施例中，电子设备检测到用户注视控制元件时，会更新控制元件的外观（例如，放大、展开、增加控制元件的细节）。以这种方式更新控制元件的外观提供了一种与控制元件交互的有效方式，也提供了一种与用户界面交互的方式，在不与控制元件交互时可减少视觉干扰。
在一些实施例中，电子设备以协调的方式滚动显示类别和子类别。在一些实施例中，电子设备同时显示类别（如内容、文件、用户界面、应用程序等）的表示和一个或多个类别中子类别的表示。
在一些实施例中，电子设备以不同的方式从具有不同沉浸级别的用户界面向后导航。在一些实施方式中，用户界面的沉浸程度与对象（如虚拟对象、真实对象的表示）的数量以及与用户界面同时显示的除用户界面以外的对象的可见度相对应。
在一些实施例中，电子设备会根据相应的输入（例如，检测到用户注视前一个用户界面的表征达阈值时间），导航离开具有第一级沉浸感的用户界面。在某些实施方案中，电子设备会根据相应的输入，放弃从具有更高沉浸度的第二级用户界面导航。
根据相应的输入从具有第一级沉浸感的用户界面导航离开，并根据相应的输入放弃从具有第二级、更高沉浸感的用户界面导航离开，为具有第一级沉浸感的用户界面提供了便利，并减少了具有第二级、更高沉浸感的用户界面的干扰，使用户能够快速、高效地使用电子设备。
图源：patentlyapple
苹果公司的专利图 2 是说明计算机系统控制器的框图，该控制器被配置为管理和协调用户的 CGR 体验，其中包括眼球（#243）和手部追踪（#244）；图 5 是说明计算机系统眼动追踪单元的框图，该单元被配置为捕捉用户的注视输入；图 9C 说明了通过显示生成组件在用户界面上显示3D环境的电子设备（Vision Pro）。
苹果公司从来不希望发明的用途是单一的，至少在专利中是如此。因此，苹果公司指出，这项发明可以应用于未来的其他设备，如台式 Mac、iPad、iPhone 和 Apple Watch。
想了解更多专利详情，请查阅苹果公司的 11720171 号专利。
来源：patentlyapple
