[发明专利]一种基于多特征识别的交互方法、装置及计算机设备

权利要求书

1.一种基于多特征识别的交互方法，其特征在于，包括：

获取目标设备的目标视频流数据；

根据所述目标视频流数据调用所述目标设备的三维模型；

将所述三维模型的数据发送至远端设备；

接收所述远端设备反馈的所述三维模型的变化增量信息。

2.根据权利要求1所述的方法，其特征在于，还包括：

根据所述变化增量信息显示所述三维模型的变化；

根据所述三维模型的变化控制所述目标设备。

3.根据权利要求1所述的方法，其特征在于，所述获取目标设备的目标视频流数据，包括：

采集并发送目标区域内目标设备的初始视频流数据；

接收所述远端设备发送的初始关键帧；

根据所述初始关键帧，确定目标关键帧；

根据所述目标关键帧，获取目标设备的目标视频流数据。

4.根据权利要求3所述的方法，其特征在于，所述根据所述初始关键帧，确定目标关键帧，包括：

提取所述初始视频关键帧中的颜色特征信息、纹理特征信息以及运动特征信息；

将所述颜色特征信息、纹理特征信息以及运动特征信息融合，分别计算各初始视频关键帧的相似度；

根据各初始视频关键帧的相似度，确定候选视频关键帧；

根据预设自适应算法，确定目标关键帧。

5.根据权利要求4所述的方法，其特征在于，所述根据所述目标关键帧，获取目标设备的目标视频流数据，包括：

获取第一视频流数据；

根据预设光流法识别所述第一视频流数据中的第一特征点，以及识别所述目标关键帧中的第二特征点；

当所述第一特征点与所述第二特征点的相似度大于预设相似阈值时，确定所述第一视频流数据与所述目标关键帧匹配；

当所述第一视频流数据与所述目标关键帧匹配时，将所述第一视频流确定为目标设备的目标视频流数据。

6.根据权利要求5所述的方法，其特征在于，还包括：

根据所述第一特征点以及预设相对距离，确定所述目标关键帧的第一中心位置；

根据所述第二特征点以及预设相对距离，确定所述第一视频流数据的第二中心位置；

根据所述第一中心位置及第二中心位置跟踪获取目标设备的目标视频流数据。

7.一种基于多特征识别的交互方法，其特征在于，包括：

接收现场设备发送的三维模型的数据；

根据所述三维模型的数据，生成三维模型；

根据所述三维模型以及预设数据库，确定变化增量信息；

将所述变化增量信息反馈至现场设备。

8.根据权利要求7所述的方法，其特征在于，在接收现场设备发送的三维模型的数据之前，还包括：

接收所述现场设备发送的目标区域的初始视频流数据；

根据所述初始视频流数据，确定问题区域，并根据所述问题区域生成初始关键帧；

将所述初始关键帧发送至现场设备。

9.一种基于多特征识别的交互装置，其特征在于，包括：

目标视频流数据获取模块，用于获取目标设备的目标视频流数据；

调用模块，用于根据所述目标视频流数据调用所述目标设备的三维模型；

数据发送模块，用于将所述三维模型的数据发送至远端设备；

变化增量信息接收模块，用于接收所述远端设备反馈的所述三维模型的变化增量信息。

10.一种基于多特征识别的交互装置，其特征在于，包括：

数据接收模块，用于接收现场设备发送的三维模型的数据；

三维模型生成模块，用于根据所述三维模型的数据，生成三维模型；

确定模块，用于根据所述三维模型以及预设数据库，确定变化增量信息；

变化增量信息发送模块，用于将所述变化增量信息反馈至现场设备。