[发明专利]增强现实AR远程交互方法及其系统

权利要求书

1.一种增强现实AR远程交互方法，其特征在于，应用于AR远程交互系统，所述AR远程交互系统包括第一终端设备、服务器以及第二终端设备；所述方法包括：

所述服务器接收所述第一终端设备创建AR场景产生的数据包，其中，所述AR场景包括对AR素材进行渲染处理后得到的初始AR对象，所述数据包包括锚点坐标、所述AR素材的尺寸、所述第一终端设备坐标以及目标检测框，所述目标检测框用于标注所述AR场景中的目标对象；

所述服务器根据所述数据包生成场景标识号，以使所述第二终端设备根据所述场景标识号参与所述AR场景，所述场景标识号用于唯一标识所述AR场景；

若所述服务器确定所述AR场景与待测视频数据满足预设一致条件，则控制所述第一终端设备与所述第二终端设备进行AR远程交互，所述第二终端设备通过第二摄像头获取所述待测视频数据。

2.根据权利要求1所述的AR远程交互方法，其特征在于，所述服务器确定所述AR场景与所述待测视频数据满足所述预设一致条件，包括：

所述服务器接收所述第二终端设备发送的所述待测视频数据，并通过所述场景标识号获取所述目标检测框以从所述目标对象中确定出跟踪对象；

所述服务器确定所述待测视频数据中的待测对象与所述跟踪对象是否满足预设匹配条件；

若确定结果为是，则所述服务器确定所述待测视频数据中是否存在参考平面，以在确定存在所述参考平面时，判定所述AR场景与所述待测视频数据满足所述预设一致条件，所述预设一致条件包括所述预设匹配条件以及所述参考平面。

3.根据权利要求2所述的AR远程交互方法，其特征在于，所述服务器确定所述待测视频数据中的待测对象与所述跟踪对象是否满足所述预设匹配条件，包括：

所述服务器运行预设对象检测器，并在所述待测视频数据的初始帧中获取初始的待测边界框，所述初始的待测边界框用于标注所述初始帧中的所述待测对象；

在所述待测视频数据的后续帧中获取后续的待测边界框，以通过所述后续的待测边界框逐步迭代所述初始的待测边界框；

确定标注所述跟踪对象的所述目标检测框与每个待测边界框之间的相似度，以当所述相似度小于预设相似阈值时，结束所述逐步迭代以确定所述跟踪对象与所述待测对象满足所述预设匹配条件。

4.根据权利要求2所述的AR远程交互方法，其特征在于，在所述判定所述AR场景与所述待测视频数据满足所述预设一致条件之后，还包括：

所述服务器向所述第二终端设备发送交互指令，以使所述第二终端设备根据所述交互指令在所述参考平面上渲染所述AR素材，得到参与AR对象，所述参与AR对象用于与所述第一终端设备的所述初始AR对象进行交互。

5.根据权利要求1-4任一项所述的AR远程交互方法，其特征在于，在控制所述第一终端设备与所述第二终端设备进行AR远程交互之后，还包括：

所述服务器接收所述第一终端设备和/或所述第二终端设备实时发送的各自的新增数据包，并根据接收到的所述新增数据包更新云锚点；

其中，所述第一终端设备和/或所述第二终端设备按照各自的预设时间周期将各自的本地锚点与所述云锚点进行比较，并当所述第一终端设备和/或所述第二终端设备确定存在新增锚点，则分别向所述服务器发送修改请求。

6.根据权利要求5所述的AR远程交互方法，其特征在于，所述向所述服务器发送修改请求之后，包括：

所述服务器根据所述修改请求生成空闲状态反馈信息，并将所述空闲状态反馈信息回传至所述第一终端设备或所述第二终端设备，以使接收到所述空闲状态反馈信息的所述第一终端设备或所述第二终端设备修改所述本地锚点。

7.根据权利要求1-4任一项所述的AR远程交互方法，其特征在于，所述第一终端设备还包括第一摄像头，所述第一摄像头用于获取所述第一终端设备所处空间的环境视频数据，所述环境视频数据用于获得所述目标检测框。