[发明专利]一种多场景的远程快速界面交互方法及装置

权利要求书

1.一种多场景的远程快速界面交互方法，其特征在于，包括以下步骤：

S100、建立本地设备与远程主机之间的界面图像关联的接口和通道，提供多个远程界面的交互场景；

S200、根据当前操作选择相应的交互场景，调整分块对象的划分方式，并且通过对比算法在远程主机识别动态区域中的分块对象，提取并记录分块对象及其自身的图元的位置信息，然后获取该分块对象及其自身的图元在图像库/缓冲区中的对应元素的ID；

S300、跟随本地设备的输入指令，计算界面图像中受该输入指令影响的分块对象或图元的位置及缩放的变换参数；

S400、根据本地设备的图像库和缓冲区，基于当前的界面图像以及受输入指令影响的图元的变换参数，在本地进行动态区域的图元的变换，并刷新界面图像；

S500、本地设备接收远程主机发送的图像、图元位置或图像库的ID数据，微调固定区域和动态区域的界面图像，使本地设备和远程主机的界面图像同步；

其中，所述步骤S200包括：用户选择交互场景、根据应用程序的类型自动切换场景、匹配当前所选的交互场景；

其中，所述步骤S500包括：

传送指令到远程主机，在远程执行指令事件，刷新界面，确定相应图元的实际位置；

判断本地设备和远程主机的分块对象或图元的位置及缩放的差异值是否超过预设的阈值；

如果超过该阈值，则在本地修正图元，包括：修正图元偏移量并且缓冲图元到本地设备的缓冲区，以替换本地设备的界面图像中的缺失的图元和与远程主机不一致的图元。

2.根据权利要求1所述的方法，其中，分块对象是指按照给定的划分方式将界面图像分割出的局部图像，而这种局部图像可以包含一个或多个图元。

3.根据权利要求1所述的方法，其特征在于，所述步骤S200包括：

根据用户点选的或者当前运行的应用程序种类，以对应所述交互场景的划分方式划分所述分块对象，所述划分方式包含横分动态区域、列分动态区域、文字分离、矢量图分离、或播放影像分离的方式。

4.根据权利要求1或3所述的方法，其特征在于，所述步骤S200包括：当远程主机接收到的场景类型选择为编辑类型，远程主机将直接对文字或字符进行识别并发送至本地设备。

5.根据权利要求1或3所述的方法，其特征在于，所述步骤S200包括：当远程主机接收到的场景类型选择为浏览类型，则远程主机基于浏览区域中的文本的行高将界面图像中浏览区域图像进行横切或竖切，以形成多个能够被识别的对象并存储在图像库中。

6.根据权利要求1或3所述的方法，其特征在于，所述步骤S200还包括：当远程主机接收到的场景类型选择为图形绘制类型，则将绘制的图形进行矢量化再存储到缓冲区，与界面图像中的其他对象传输到本地设备。

7.根据权利要求1所述的方法，其特征在于，所述步骤S300包括：

获取输入指令的事件和动作参数，判断与所述输入指令的事件关联的分块对象或图元；

将动作参数转换为对应的分块对象或图元的位置和缩放的变换参数，并且配置所述动作的执行时间与分块对象或图元的变换时间一致。

8.根据权利要求7所述的方法，其中，分块对象或图元与指令关联包括：指令直接作用于分块对象或图元；分块对象或图元位于动态区域中，并且指令导致该动态区域的变化；指令直接或者间接影响分块对象或图元的激活或者取消激活。

9.根据权利要求1所述的方法，其特征在于，所述步骤S400包括：

在执行指令事件的时间段内，根据分块对象或图元的变换参数，在从本地的缓冲区获取与当前图像界面的动态区域关联的额外图元，并且加入该额外图元进行动态区域的界面变换。

10.根据权利要求1所述的方法，其特征在于，所述步骤S400还包括：脱离远程主机而在本地执行图元的变位和/或从缓冲区增加图元。