[发明专利]附连控制元素的混合环境显示

摘要

本文中所描述的技术提供了附连控制元素的混合环境显示。本文中所公开的技术允许第一计算设备的用户与被配置成控制对象(诸如灯、家电、或任何其它合适的对象)的远程计算设备交互。本文中公开的各配置中允许第一计算设备通过捕捉和分析定义一个或多个手势(诸如用户看着由第二计算设备控制的对象)的执行的输入数据来导致一个或多个动作(诸如对对象的选择或用户界面的显示)。被配置成实现对对象的控制的经渲染的图形元素可与对象的现实世界视图一起被显示。

主权项

一种第一计算设备，包括：处理器；硬件显示表面；一个或多个输入设备；其上存储有计算机可执行指令的存储器，所述计算机可执行指令在由所述处理器执行时，使得所述第一计算设备：获得定义被配置成致使第二组计算机可执行指令在第二计算设备处执行的一个或多个命令的控制数据，其中所述第二计算设备被配置成与对象交互，获得指示与所示第二计算设备或所示对象相关联的状态的状态数据，致使包括所述状态数据和所述一个或多个命令的一个或多个图形元素显示在所述硬件显示表面上，其中所述硬件显示表面被配置成通过所述硬件显示表面的透明部分将所述一个或多个图形元素与所述对象的现实世界视图一起显示，以及响应于对所述一个或多个命令的选择被所述一个或多个输入设备检测到，将所述一个或多个命令传递给所述第二计算设备，其中传递所述一个或多个命令致使所述第二组计算机可执行指令的至少一部分在所述第二计算设备处执行。