上周，美国专利商标局发布了苹果公司的一项新的专利申请，该申请与他们未来的增强现实眼镜有关，将为用户提供只有佩戴AR眼镜时才能看到的信息。例如，参观博物馆的用户将被展示只有苹果的增强现实眼镜才能看到的绘画或雕塑信息。在另一个例子中，剧院大厅中的海报可以呈现即将上映的电影，并且海报可以包含诸如通过增强现实眼镜可见的电影预告片的信息。该专利的另一个方面涉及苹果的增强现实眼镜如何与手势配合工作。

苹果公司在其专利中指出，带有光学方案的透明HMD作为可佩戴眼镜提供给用户，每只眼睛都有一个单独的透明透镜。

苹果正在申请专利的发明重点在于详细解释手势的使用，因为手势是用户与Apple Glasses交互的方式之一。

一般来说，苹果的发明涵盖用于提供计算机生成的现实(CGR)内容的设备、系统和方法，包括基于特定检测到的对象(例如，用户的手)的表面显示的虚拟内容。

虚拟内容可以与物理环境相结合地被看到，并且在这些和其他情况下，虚拟内容的可见性可以通过在相对于表面的位置处选择性地显示虚拟内容来提高，该表面具有可以使虚拟内容更容易被看到或理解的特征。例如，在用户的手的相对均匀和平坦的表面上显示虚拟内容可以使用户比在树木和具有可变颜色的移动树叶前面更容易看到虚拟对象。

一些实施例使用位于HMD或与其通信的传感器来检测和跟踪手相对于HMD的位置。在各种实施例中，检测和跟踪手的位置包括将手的颜色或手模型与深度图等相关联，以检测和跟踪手的形状及其相对于HMD的姿势(例如，姿势和位置)。

苹果的专利非常详细地描述了如何使用手势与眼镜进行交流。苹果指出:“在一些实验中，手势可以用来启动或停止在用户手上显示虚拟内容的HMD。例如，顺时针或逆时针转动闭合的拳头可以打开或关闭显示器。

在一些实施方式中，用户可以基于物理环境来进行控制(例如，允许或阻止)HMD用户手中的可用虚拟内容的显示(例如，在购物时显示广告或在观光时显示博物馆历史信息)。

在一些实施例中，用户可以基于物理环境控制选择在用户的手上显示可用的虚拟内容。例如，当沿着街道行走时，只允许在用户的手上显示食物或餐馆的广告。

在一些实施例中，可以根据需要操纵对HMD用户可见的单个CGR虚拟内容。例如，选择让最初在HMD可见的虚拟内容重新显示在用户的手上。例如，用左手“抓取”可视虚拟内容，并将其放在用户的右手，以重新显示虚拟内容。

用户可以以其他方式查看和体验基于CGR的用户界面，该界面允许用户通过手势、语音命令、输入设备等基于虚拟内容位置来选择、放置、移动和以其他方式呈现CGR环境。

一些通信可以显示在用户的手掌上。在专利附图中提到的情况下，在下面的图4A和4B中，我们看到用户可以使用用户手中的卡进行通信。

如图1所示，在图4A中，在物理环境# 405中描绘了持有对象的用户的对象# 414和手臂# 410(可以在其中检测到)。如图4B所示，在CGR环境# 430中，虚拟内容# 470现在可以显示在用户面前。

在一个例子中，虚拟内容可以识别或提供关于物理环境中的某些东西的信息。在另一个例子中，虚拟内容可以涉及与物理环境无关的事物。

苹果的专利图5是示出根据一些实施方式的在当前物理环境中确定合适的背景条件或背景位置以覆盖CGR环境中的虚拟内容的示例性方法的流程图。除了专注于使用用户的手势之外，苹果还补充道，“可以使用任何视觉、声音、触觉、味觉和嗅觉来感知或与CGR物体进行互动。例如，人可以感知创建3D或空间音频环境的音频对象并与之交互，并且可以感知3D空间中的点音频源。但苹果没有详细说明“音频对象”的实际含义。

如果对Apple Glasses感兴趣，可以参考Apple Patent 20200401804(标题为“基于检测对象的虚拟内容定位”)，其中有很多细节值得探索。苹果的专利上周四由美国专利商标局发布。考虑到这是专利申请，不知道这款产品什么时候上市。

本专利的发明人包括:

Anselm Grundhö fer:工程经理。在加入苹果之前，格伦德费尔在迪士尼工作了7年，担任首席研究工程师和投影技术主管

拉胡尔·奈尔:原型工程师