1月30日，苹果获得一项新专利，该专利涉及带有运动追踪功能的Apple Pencil，可与Vision Pro 配合使用，帮助用户在游戏中观察3D物体，用于视频娱乐或进行模拟训练等。通过触控笔上的摄像头，用户可以使用Vision Pro或其他头戴式设备查看3D物体周围的情况等。

头戴式设备的触控笔输入系统

根据本文公开的一些案例，涉及头戴式设备和手持式触控笔的系统可用于追踪用户的自由空间移动。触控笔可以配备一个或多个发光体，头戴式设备可以配备一个朝外的摄像头，该摄像头被配置为根据对发光体的检测来传递触控笔的移动。这样就可以提供一个独立的追踪系统，允许用户在3D空间中自由移动手持式触控笔，同时无需外部摄像头就能精确地传输触控笔的自由空间移动。

展示了具有头戴式设备和触控笔/Apple Pencil的示意图

图1的触控笔#300可以配置为能在三维空间中自由移动的无线设备。摄像头#325可以用来收集从用户#10和/或头戴式设备#200的传感器#240的视野中隐藏或遮挡的空间的数据或图像。这些数据可用于绘制电子系统#100运行所在物理环境的地形图。例如，映射可用于影响MR环境的虚拟对象与物理环境的交互方式。

用触控笔的摄像头捕捉到的环境图像可以直接显示在头戴式设备的显示屏#220上，允许用户观察物理环境中物体的周围或内部。这些图像可以包括静态图像和/或视频图像。

在某些用例中，用触控笔的摄像头拍摄的视频可以实时呈现在头戴式设备上，允许用户使用触控笔查看头戴式设备上的隐藏或遮挡空间。

此外，触控笔和/或头戴式设备也可以包括一个或多个其他传感组件，其中可以包括非光学传感组件，例如超声波传感组件和/或电磁传感组件。

苹果用于头戴式设备的专利Apple Pencil

图2展示了触控笔示例的透视图。触控笔还可添加一个控制输入#358，其设计目的是接收与笔尖#390提供的触摸输入不同的命令。例如，控制输入可以包括按钮、触摸传感器、麦克风或其他能够接收用户手部或其他部位输入的输入组件。

控制输入可用于激活触控笔的组件、更改操作模式、更改设置或提供其他功能，以支持基于触控笔的电子系统#100输入。

例如，控制输入可用于触控笔的开机或关机；激活发光器#315；激活摄像头#325；激活摄像头的快门；在头戴式设备#200上显示的CGR中触发选择、导航或游戏输入。

图3展示了具有一个或多个发光体的触控笔示例的正视图；图4展示了具有一对不同空间图案的发光体的触控笔示例的正视图；图5展示了具有发光体的触控笔示例的正视图；图6展示了具有多个摄像头的触控笔示例的正视图。

展示了具有头戴式设备和触控笔的系统示例的块状图

苹果指出，虽然该专利的重点是提供配合Vision Pro等头戴式设备的触控笔/Apple Pencil，但这种新的Apple Pencil未来也可能会用于iPhone、Mac、iPad等设备。