苹果公司的AR设备，如"苹果眼镜"或其他头戴式显示器，可能会检测到佩戴者何时伸出手，并在那里放置一个虚拟控制面板。该公司此前曾研究过将任何表面变成带有触摸控制的显示屏。现在，它还被披露正在研究通过虚拟方法将控制权带到用户手中。
"用于在三维环境中显示应用程序的设备、方法和图形用户界面 "是一项新披露的苹果专利申请。其核心是两个相关的问题。首先，如何知道"苹果眼镜 "佩戴者手的转动方式。然后，第二，如何向他们展示一个看起来在他们手中的控制面板。
在拟议的虚拟控制系统中，佩戴者将他们的手腕转开，这样他们就能打开他们的手。在显示第一用户界面对象的同时，计算机系统检测到手腕的位置或方向已经改变，以满足第二标准，该标准要求手腕的外侧朝向视点，作为回应，计算机系统从在第一位置显示第一用户界面切换到在第二位置显示包括多个控制功能的第二用户界面对象。
不过，这远不是一个简单的过程，因为如果苹果不小心，经常打手势的用户可能会不断地被看到控制面板。因此，该专利申请花了很多时间和注意力来确定佩戴者的意图，然后提供用户想要的东西。它并不特别关注显示什么具体的控制，更关注显示的过程。这意味着一个能够确定用户何时需要控制的系统，也可以与AR应用协商，提供相关的控制。
