[发明专利]用于远程协助的方法、装置、系统及电子设备

说明书

本申请公开一种用于远程协助的方法、装置、系统及电子设备。涉及计算机信息处理领域，该方法包括：通过摄像装置获取当前图像；获取标记信息，所述标记信息包括标记图像信息与标记位置信息；根据所述标记信息对所述当前图像进行图像处理，获取识别数据；以及根据所述识别数据，将所述标记信息在显示屏幕的对应位置进行展示。本申请公开的用于远程协助的方法、装置、系统及电子设备，能够提高远程协助的准确度与工作效率。

技术领域

本发明涉及计算机信息处理，具体而言，涉及一种用于远程协助的方法、装置、系统及电子设备。

背景技术

中国作为一个制造大国，在各行各业中使用了大量机械设备，并通常高强度地持续运转，不可避免地会出现各种故障，然而专业维修技术人员缺乏，而且现场维修又必然带来时间和差旅费用上的大大增加，单靠语音和现场的固定摄像头沟通效率非常低下，虽然也出现过用手机拍摄照片和视频传输到后台，或者利用头戴式摄像头传输视频的方式，但由于操作麻烦，难以释放双手，拍摄方位难以校准，沟通不够实时等问题，多年来一直没有很好的手段解决远程维修的协助沟通问题。在远程医疗、远程教育等领域也存在相类似的指导沟通问题亟待解决。

利用视频会议系统解决远程声像多人互动的问题已经有多年历史，但受限于网络条件和硬件限制，一直很少应用在设备维修远程指导领域。随着智能硬件技术和无线网络技术(比如：3G/4G通信网络)的发展，目前已经具备相应的技术条件。未来几年必将引来本应用的爆发式增长。

现有技术方案通常利用AR眼镜作为现场采集设备，结合传统的远程视频会议系统实现实时交互式远程维修指导。除了语音通讯外，现场和远端都能看到对方的视频画面，或者现场和远端都看到现场的画面，但现场视频是传到网络服务器再传回现场的方式。还能通过白板将远端的笔迹或共享的数字材料传回到现场端的显示单元上。

但该技术在运用过程中存在以下问题：

1.现场和远端看到的是对方的实时画面，而实际现场并不需要看到远端的摄像头所对应的画面，这就浪费了一路视频的网络流量，增加了现场穿戴式硬件的图像解析性能损耗，也使得现场人员并不了解自己的摄像头是否对准了希望拍摄的物体。

2.远端需要对现场进行指导时，现有的技术只能通过语音指示，偶有通过屏幕截取的方式，远端截取现场的瞬时画面，再在瞬时的静态画面上绘图后通过共享或白板的方式传回现场，异步指导现场进行操作，不具有实时性，操作步骤繁琐。难以在现场视频基础上或直接在现场环境中用增强现实叠加的方式解决实时沟通的问题。

3.无法将远程传输的数字材料直接在现场端设备上打开查看。比如：图片、视频、3D模型等。远端无法完全控制现场显示的内容，导致现场人员在切换显示内容时需要频繁对穿戴设备进行操作，而穿戴设备通常不便于带着手套或手上有油污时进行操作。即使可以语音控制，但由于现场维修环境通常比较嘈杂，语音控制会出现困难。

因此，需要一种新的用于远程协助的方法、装置、系统及电子设备。

在所述背景技术部分公开的上述信息仅用于加强对本发明的背景的理解，因此它可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

有鉴于此，本发明提供一种用于远程协助的方法、装置、系统及电子设备，能够提高远程协助的准确度与工作效率。

本发明的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本发明的实践而习得。

根据本发明的一方面，提出一种用于远程协助的方法，该方法包括：通过摄像装置获取当前图像；获取标记信息，标记信息包括标记图像信息与标记位置信息；根据标记信息对当前图像进行图像处理，获取识别数据；以及根据识别数据，将标记信息在显示屏幕的对应位置进行展示。

在本公开的一种示例性实施例中，显示屏幕包括：可穿戴式显示设备的显示屏幕。