[发明专利]一种远程协助中视频画面共享标注系统及共享标注方法

说明书

本发明公开了一种远程协助中视频画面共享标注系统，包括：第一终端，所述第一终端具有：第一视频获取单元，用于抓取或拍摄视频画面；第一解算单元，用于对所述视频画面进行解算，获取所述视频画面的三维认知信息；第一叠加单元，用于将所述视频画面、三维认知信息和标注信息进行叠加；第一显示单元，用于显示叠加后的视频画面；第二终端，所述第二终端具有：第二显示单元，用于显示来自第一终端的视频画面以及标注信息；第二标注单元，用于对共享视频画面进行标注；第二解算单元，用于将所述标注解算为标注信息；以及第二叠加单元，用于将所述视频画面、三维认知信息和标注信息进行叠加；以及共享单元，所述共享单元用于各终端间的数据传输共享。

技术领域

本发明涉及远程协助技术领域。具体而言，本发明涉及一种远程协助中视频画面共享标注系统及共享标注方法。

背景技术

增强现实(Augmented Reality，AR)是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息通过图像处理等技术，模拟仿真后再叠加，将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。增强现实技术在具体产业领域具有较好的应用前景，能广泛应用到军事、医疗、建筑、教育、工程、影视、娱乐等领域。

同时，远程协助技术已经从最初的基于计算机的远程桌面协助技术逐渐发展到更多的技术领域，如医疗的远程协助、设备维护远程协助等等，但目前的远程协助主要基于语音、视频的沟通，而且通常是一对一的实时沟通。这种远程协助方法，一方面由于网络等原因导致信息沟通困难，另一方面协助者完全靠语音解释导致沟通效率较低，同时由于是一对一的远程协助，对部分疑难问题无法实现多个远程专家的会诊式协助指导。

针对现有的远程协助系统和方法存在的上述问题，本发明提出一种新型的远程协助中视频画面共享标注系统及标注方法实现多人实时共享视频画面，并基于增强现实技术叠加标注信息，从而实现更复杂问题的高效远程协助。

发明内容

针对现有远程协助系统和方法中存在的沟通效率较低、较难进行会诊式协助指导等问题，本发明提供一种远程协助中视频画面共享标注系统，包括：

第一终端，所述第一终端具有：第一视频获取单元，用于抓取或拍摄视频画面；第一解算单元，用于对所述视频画面进行解算，获取所述视频画面的三维认知信息；第一叠加单元，用于将所述视频画面、三维认知信息和标注信息进行叠加；第一显示单元，用于显示叠加后的视频画面；

第二终端，所述第二终端具有：第二显示单元，用于显示来自第一终端的视频画面以及标注信息；第二标注单元，用于对共享视频画面进行标注；第二解算单元，用于将所述标注解算为标注信息；以及第二叠加单元，用于将所述视频画面、三维认知信息和标注信息进行叠加；以及

共享单元，所述共享单元用于各终端间的数据传输共享。

在本发明的一个实施例中，所述第一终端还包括第一标注单元，用于对视频画面进行标注，并由第一解算单元对所述标注进行解算，获取标注信息。

在本发明的一个实施例中，所述三维认知信息包括当前视频画面中的平面信息、平面中的点信息和所述第一终端的位置信息、姿态信息。

在本发明的一个实施例中，所述第二终端还包括第二视频获取单元，用于抓取或拍摄第二视频画面。

在本发明的一个实施例中，所述第一终端和或所述第二终端为具有摄像装置且安装有专用程序的手持计算设备。

在本发明的一个实施例中，所述第一终端和或所述第二终端为具有摄像装置且安装有专用程序的可穿戴设备。

在本发明的一个实施例中，所述标注信息通过所述所述视频画面的三维认知信息固定在所述视频画面的特定对象上。