近日，美国专利商标局正式授予苹果公司一项专利，该专利涉及一种头戴式设备，可以提供身临其境的用户体验，同时允许用户以自然、熟悉和直观的方式与系统交互。该专利涉及使用物理或虚拟键盘和Apple Pencil，使用跟踪设备配件进行绘画。与物理键盘相比，虚拟键盘可以为用户提供许多小优势。

虽然头戴式设备可以以各种方式向用户提供输出，但允许头戴式设备接收来自用户的输入对提升用户体验也是有帮助的。头戴式设备可以提供身临其境的用户体验，同时允许用户以自然、熟悉和直观的方式与系统交互。

头戴式设备+键盘输入

苹果公司指出，键盘是许多计算机用户熟悉的输入设备。使用头戴式设备可以使用户的双手保持自由，以类似于使用键盘的方式操作键盘或其他设备。

键盘、另一个输入设备和/或任何在表面上的操作可以通过头戴式设备的功能得到加强，它可以根据键盘的使用情况显示反馈、输出或其他功能。

例如，头戴式设备可以显示由用户操作键盘产生的文本。该文本的显示方式可以让用户很容易看到键盘、手以及由键盘操作产生的文本。

头戴式设备可以进一步显示便于用户操作键盘的功能。例如，可以显示建议的文本、击键或与键盘的键相关的其他特征，供用户选择。

再比如，键盘的显示位置和方向可以符合头戴式设备视场内用户手的排列。

苹果公司的专利图1说明了头戴式设备和键盘的使用视图；图2说明了头戴式设备和输入设备的使用视图；图3说明了头戴式设备和平面（如桌面）的使用视图。

如图1所示，跟踪设备（#200）可以放在靠近键盘（#300）的地方，以跟踪用户的手和/或键盘的按键在操作过程中的运动。追踪装置可以与头戴式设备进行通信，这样，追踪装置的检测可以产生信号，并从追踪装置传输到头戴式设备。

在图2中，头戴式设备可以与另一个输入设备一起使用，例如输入设备#400可以是一个虚拟键盘，HMD提供键盘的视觉效果。在头戴式设备中的摄像头与跟踪设备之间，用户的输入可以被准确理解，就像物理键盘一样。

在图3中，苹果公司更进一步，用户将能够在桌子、墙壁等平面使用虚拟键盘，而且能够用Apple Pencil书写或绘画。

苹果公司的专利图7说明了头戴式设备的显示，提供了一个窗口内的键盘、用户的手和文本的视图；图8说明了头戴式设备的显示，提供了一个键盘、用户的手和有可用选择的文本的视图。

苹果公司的专利图11说明了一种头戴式设备的显示，提供了键盘、用户的手和虚拟指示器的视图；图14说明了一种头戴式设备的显示，提供了键盘部分的视图，键盘部分基于用户手的位置进行排列。