Apple Vision Pro 欧洲专利曝光：深入探讨 3

近日，苹果公司在欧洲申请的一项关于 Apple Vision Pro 的专利曝光。

(相关资料图)

苹果公司在专利中指出，XR 环境是指人们通过电子设备感知和/或与之交互的全部或部分模拟环境。例如，XR 环境可以包括 AR 内容、MR 内容、VR 内容和/或类似内容。使用 XR 系统，可以追踪人的物理运动或其代表的子集，并且作为响应，以符合至少一个物理定律的方式调整在 XR 环境中模拟的一个或多个虚拟对象的一个或多个特征。

例如，XR 系统可以检测头部运动，并响应于调整图形内容和呈现给人的声场，其方式类似于这些视图和声音在物理环境中的变化方式。作为另一示例，XR 系统可以检测呈现 XR 环境的电子设备（例如，手机、平板电脑、笔记本电脑等）的运动，并且作为响应，以类似于这种视图和声音在物理环境中变化的方式调整呈现给人的图形内容和声场。在某些情况下（例如，出于可访问性原因），XR 系统可能会根据物理运动的表示（例如，语音命令）调整 XR 环境中图形内容的特征。

有许多不同类型的电子系统使人能够感知和/或与各种 XR 环境交互。示例包括头戴式系统、基于投影的系统、平视显示器（HUD）、具有集成显示功能的车辆挡风玻璃、具有集成显示功能的窗户、戴在人的眼睛上的镜片显示器（例如，类似于隐形眼镜）等等。

头戴式系统可以包含一个或多个成像传感器，以捕获物理环境的图像或视频，和/或一个或多个麦克风，以捕获物理环境的音频。头戴式系统可能具有透明或半透明显示器，而不是不透明的显示器。透明或半透明显示器可能具有一种媒介，通过该媒介，代表图像的光被引导到用户的眼睛上。

苹果的头显设备 #105 可能包括一个或多个摄像头，例如可见光摄像头、红外摄像头等。它还将包括各种传感器，包括但不限于摄像头、图像传感器、触摸传感器、麦克风、惯性测量单元（IMU）、心率传感器、温度传感器、激光雷达传感器、雷达传感器、声纳传感器、GPS 传感器、Wi-Fi 传感器、近场通信传感器等。

此外，头显可以包括能够接收用户输入的硬件元件，例如硬件按钮或开关。由此类传感器和/或硬件元件检测到的用户输入对应于各种输入模式，用于与给定 XR 环境中显示的虚拟内容进行互动。例如，这种输入模式可以包括但不限于面部追踪、眼动追踪（例如，凝视方向）、手部追踪、手势追踪、生物特征读数（例如，心率、脉搏、瞳孔扩张、呼吸、温度、脑电图、嗅觉）、识别语音或音频（例如，特定的热词）以及激活按钮或开关等。

苹果专利图 2 说明了 XR 环境的示例，其中包括由 XR 头显（Apple Vision Pro）显示的多个用户界面，以显示在物理环境中的多个相应位置。

苹果专利图 3 说明了苹果专利图的不同 3D 视图，用于说明真实和虚拟组件的分层，这些组件在 Apple Vision Pro 中呈现完整的 AR 视图。

根据苹果的说法，对于每个 UI（例如，每个基础应用程序），头显会分配一个边界，该边界定义了物理环境 #200 的一部分，其中包括远离头显的位置，在该位置显示 UI（例如，显示 #230 导致头显用户感知 UI， 即使感知/表观位置可能没有物理显示）。

苹果专利图 4 说明了 Apple Vision Pro 头显的系统进程如何控制各种应用程序对场景信息和/或用户信息的访问。

苹果专利图 7 说明了 XR 环境的示例，其中显示的用户界面是显示器显示的唯一用户界面，并且其中用户界面包括有界的二维 UI 窗口、有界的部分三维 UI 窗口和根据一个或多个实现的有界三维部分。

更具体地看图 7，苹果头显已经确定显示的 UI 内容与火星有关，并根据显示的 UI 内容修改了二维 UI 窗口 #700、部分三维 UI 窗口 #704、有界三维 UI 窗口#726 边界之外的部分可视区域#207（例如， 以显示增强功能 #708，在可视区域 #207 上显示半透明的红色背景，对应于火星的红色）。

苹果专利图 13 说明了用于操作跨平台 VR 应用程序的示例架构的框图。

苹果专利图 14 说明了用于操作第三方应用程序的示例架构的框图。

苹果早在 2022 年 12 月就申请了这项专利，近日在欧洲以编号 #WO2023102139 公布。