[发明专利]跨平台远程协助方法、系统、电子设备及存储介质

说明书

本申请提供一种跨平台远程协助方法、系统、电子设备及存储介质，所述方法包括：所述服务器根据设备型号信息和故障信息匹配故障操作信息，发送所述故障操作信息至所述终端；所述服务器端根据所述故障操作信息获取所述设备中待执行操作部件的图像特征；所述服务器根据所述第一视频信息、所述设备的图像特征和特征提取算法进行匹配，以获取所述第一视频信息中的所述待执行操作部件；所述服务器根据所述匹配结果生成第二视频信息，发送所述第二视频信息至所述终端；所述显示器用于显示所述第二视频信息，所述第二视频信息包括所述故障操作信息和所述待执行操作部件，所述方法能够根据现场的视频信息确认故障设备的类型和操作指南，提高现场维护效率。

技术领域

本申请涉及无线通信技术领域，尤其涉及一种跨平台远程协助方法、系统、电子设备及存储介质。

背景技术

随着技术的进步，电子设备的复杂度正变得越来越高，电气设备试验中需要严格按规程和步骤操作，需要记录大量的试验现象和实验数据，高压试验同时需要专业技术人员监督指导。试验操作对数据记录、现象观测和人员安全有直接影响。同时，试验设备故障也需要及时处理，使试验进程能尽快恢复。试验操作不当可能引发事故或灾害，危害财产和人身安全。

目前，在出现紧急情况时，相关技术中通过共享画面的方式进行操作维护。但是，在一些情况下，无法通过画面判断故障的类型或者需要下一步执行的操作。发明内容

有鉴于此，有必要提供一种跨平台远程协助方法、系统、电子设备及存储介质，能够至少克服以上缺陷之一。

第一方面，本申请实施例提供一种跨平台远程协助方法，包括服务器和终端，所述服务器与所述终端通信连接，其特征在于，所述终端包括摄像头、显示器和数据接口，所述方法包括：所述服务器获取来自所述摄像头的第一视频信息和来自所述数据接口的设备运行信息；所述服务器根据所述设备运行信息和卷积神经网络进行匹配，以获取设备型号信息和故障信息；所述服务器根据所述设备型号信息和所述故障信息匹配故障操作信息，发送所述故障操作信息至所述终端；所述服务器端根据所述故障操作信息获取所述设备中待执行操作部件的图像特征；所述服务器根据所述第一视频信息、所述设备中待执行操作部件的图像特征和特征提取算法进行匹配，以获取所述第一视频信息中的所述待执行操作部件；所述服务器根据所述待执行操作部件和所述第一视频信息生成第二视频信息，发送所述第二视频信息至所述终端；所述显示器用于显示所述第二视频信息，所述第二视频信息包括所述故障操作信息和所述待执行操作部件。

根据本申请的一个实施例，所述方法还包括：所述服务器切割所述第一视频信息以获取第一图像信息，根据定向快速旋转算法将所述设备中待执行操作部件的图像特征与所述第一图像进行匹配，以获取所述待执行操作部件在所述第一图像中的位置。

根据本申请的一个实施例，所述方法还包括：根据待执行操作的顺序编号所述待执行操作部件；高亮所述待执行操作部件。

根据本申请的一个实施例，若所述第二视频信息中无法显示全部所述待执行操作部件，则在所述显示器显示所述无法显示的所述待执行操作部件的名称及所述编号。

根据本申请的一个实施例，所述方法还包括：所述服务器获取所述终端的位置信息和所述待执行操作部件的位置信息；所述服务器根据所述终端的位置信息和所述待执行操作部件的位置信息生成导航信息，并发送所述导航信息和所述待执行操作部件的位置信息至所述终端。

根据本申请的一个实施例，所述方法还包括：所述显示器显示所述导航信息，并根据所述待执行操作部件的位置信息显示所述待执行操作部件的位置。

根据本申请的一个实施例，所述特征提取算法为定向快速旋转算法。

根据本申请的一个实施例，所述方法还包括：所述终端使用语音播报所述故障操作信息