今天，美国专利商标局正式向苹果公司授予了一项专利，该专利与未来可能推出的 Vision Pro 应用程序有关，该应用程序可为艺术家提供虚拟画布和素描本，提供虚拟擦除和涂抹技术，并可分层进行绘画或编辑。

苹果公司在其新专利中描述了提供交互式计算机生成现实（CGR）环境的技术，该环境用于使用电子系统和设备（如 Apple Vision Pro）在绘画表面上创建虚拟绘画，其中 CGR 环境在创建虚拟绘画时为用户提供逼真和身临其境的体验，就像用户在现实世界中创建真实绘画一样。通过这种方式，所述技术可使用户无需使用传统的物理绘图工具即可创建绘图。

此外，由于绘图是在 CGR 环境中创建的，所述技术允许用户根据需要轻松有效地操作（例如更改、擦除、改变）绘图的一部分。因此，所述技术使用户能够体验在 CGR 环境中创建虚拟图纸，就像用户在真实环境中创建真实图纸一样，同时减少了与在真实环境中创建真实图纸相关的一些不便。

根据某些实施方案，专利描述了一种方法。该方法包括：使用一个或多个图像传感器检测包括第一预定义手指方向类型的第一输入；以及在检测到第一输入时，响应于使用一个或多个图像传感器检测到的手部运动在计算机生成的现实环境中的绘图表面上绘图，其中响应于在计算机生成的现实环境中的绘图表面上绘图的手部运动，包括在计算机生成的现实环境中的绘图表面上产生与检测到的手部运动相对应的视觉效果。

苹果公司的专利图 2 展示了为 Apple Vision Pro 设计的虚拟艺术家应用程序的空白起始画布；在图 4 中，我们看到用户启动了一个手势，该手势将调用铅笔或画笔等工具；在图 5 中，我们看到用户选择了一支虚拟铅笔进行素描；在图 6 中，用户开始了他们的绘画；在图 7 、8、9中，用户选择了一支虚拟铅笔进行素描。在图 6 中，用户开始绘图；在图 7 中，苹果公司指出，在某些实施例中，当用户使用绘图工具在绘图表面提供输入时，设备 #100a 会生成（和/或使头显等不同设备生成）与绘图相关的一个或多个（视觉和/或音频）相应反馈。

进一步参考图 7，苹果公司注意到，在某些实施例中，反馈包括与绘图工具 #206 在绘图表面 #202 上的移动相对应的音频反馈（除了视觉反馈或作为视觉反馈的替代）。在某些实施例中，如果所选的绘图工具是铅笔，音频反馈就是铅笔在纸上使用时发出的素描（或涂鸦）声。在一些实施例中，如果选定的绘图工具是画笔，音频反馈就是画笔在画布上使用时发出的刷刷声。在某些实施例中，如果选定的绘图工具是钢笔，音频反馈就是钢笔在纸上涂鸦的声音。

在某些实施例中，声音反馈的大小与绘图工具施加到绘图表面的力大小相对应。因此，在某些实施例中，声音反馈的大小会随着 CGR 环境中绘图工具施加到绘图表面的力的增大和减小而产生变化。

在苹果公司的图 9 中，我们看到艺术家使用了一种新的“张开手掌”手势，这种手势可以启动艺术家的调色板，使用各种颜料进行创作。其他手势还可以让艺术家使用粗细不同的钢笔或画笔；图 12 中，用户启动了“擦除”模式，以纠正错误或他们不喜欢的笔触。

在苹果公司的专利图 13 中，艺术家使用双指手势进行“涂抹”模式；图 14 展示了将 CGR 环境绘图表面 #202 旋转到侧角视图（从用户的角度）的设备显示。在某些实施例中，图纸 #208 包括多个图层（例如，至少使用第一种颜色和第二种颜色绘制的一幅画，其中第一种颜色涂在画的部分第二种颜色上），从而为图纸提供深度效果，如图 14 所示。图层是可编辑的。苹果公司是这样描述的：由于绘画是在 CGR 环境中创建的，因此所述技术允许用户根据需要轻松有效地操作（例如更改、擦除、改变）绘画的一部分。

苹果这项专利的负责人是 VisionOS 高级经理 Edwin Iskandar。