首页科技快讯 Apple Vision Pro 新专利：涵盖基于面部和手部追踪的 AR 多模态输入

Apple Vision Pro 新专利：涵盖基于面部和手部追踪的 AR 多模态输入

来源：晰数塔互联网快讯时间：2023年07月14日 06:23

近日，美国专利商标局正式授予苹果一项与计算机生成的现实环境有关的 Apple Vision Pro 专利，包括在计算机生成的现实环境中多模态输入。虽然录制空间视频最初将由头显顶部的按钮触发，但苹果专利还显示，在未来，指定的面部表情可能会触发事件的录制，例如体育赛事。

苹果在其专利背景中指出，AR 技术旨在通过提供增强的物理环境并增强电子信息，来弥合虚拟环境和物理环境之间的差距。因此，电子信息似乎是用户所感知的物理环境的一部分。在示例中，AR 技术进一步提供了一种用户界面，以与覆盖在增强物理环境中的电子信息进行交互。

苹果专利主题技术的实现至少部分地基于电子设备是否与相关基础设备通信耦合来确定电子设备的操作模式。基于确定的操作模式，该主题技术识别用于启动电子设备的视野内的内容记录的一组输入模态。

该主题技术监控由包含在电子设备中或与之通信耦合的至少一个传感器生成的传感器信息。

此外，当被监测的传感器信息表明至少一组已识别的输入模式之一已被触发时，该主题技术开始记录电子设备视野内的内容。

Apple Vision Pro 可能包含可以接收用户输入的硬件元素，例如硬件按钮或开关。此类传感器和/或硬件元素检测到的用户输入对应于用于从应用内发起共存会话的各种输入模式。

例如，这种输入模式可以包括但不限于面部追踪、眼动追踪（例如，凝视方向）、手部追踪、手势追踪、生物特征读数（例如，心率、脉搏、瞳孔扩张、呼吸、温度、脑电图、嗅觉）、识别语音或音频（例如，特定的热词）以及激活按钮或开关等。

苹果专利图 3B 和 3C 说明了根据该主题技术的实现来追踪注视方向，以启动计算机生成的现实记录的示例；图 4B 和 4C 说明了在计算机生成的现实环境中确定感兴趣区域，并根据感兴趣区域启动记录的示例；图 5B 和 5C 说明了根据该主题技术的某些实现向计算机生成的现实环境中的各种对象或实体提供注释的示例。

苹果专利图 6 说明了在 Apple Vision Pro 视野内启动内容录制的示例过程流程图。

发布于：山东