[发明专利]基于定位标注的客服视频交互方法和设备

说明书

本发明公开了一种基于定位标注的客服视频交互方法和设备。该方法包括：客服系统设备接收终端侧设备传输的视频信息并转发到客服侧设备上显示，其中，客服系统设备包括实体清单、识别算法和标注信息库；客服系统设备根据目标实体选择识别算法，根据识别算法从视频信息更新的抽帧图像中识别是否存在目标实体，若存在，对目标实体进行位置识别，得到定位信息；客服系统设备接收交互信息，并将交互信息和定位信息同步到终端侧设备和客服侧设备，以在终端侧设备和客服侧设备实现标注信息的显示。采用该基于定位标注的客服视频交互方法能够显著提升视频信息标注的交互方式效果。

【技术领域】

本发明涉及互联网应用领域，尤其涉及一种基于定位标注的客服视频交互方法和设备。

【背景技术】

随着车联网的发展，车辆智能化能力逐步提升，空中下载(Over the Air，简称OTA)技术的应用更是落地提升了相关系统改进提升的速度。然而，故障问题也随之呈现出隐性化和复杂化，以往的客服模式逐步难以适应新的服务场景，通过视频的方式开展远程专家客服系统改造成为趋势。

视频客服是在现有语音、在线客服基础上，增加视频接入的能力，较原有模式增加了更丰富的信息共享，可以将客服侧设备的信息实时展示到客服侧设备，便于客服快速了解现场情况，及时地帮助用户解答或解决其实际问题。目前的视频客服与终端侧设备用户的交互方式除了以语音、文字方式之外，还引入了视频信息标注的交互方式，但是，由于交互场景复杂、设备性能上的高要求等客观原因，该视频信息标注的交互方式仍存在诸多问题，视频信息标注的交互方式效果不佳。

【发明内容】

有鉴于此，本发明实施例提供了一种基于定位标注的客服视频交互方法和设备，用以解决目前视频信息标注的交互方式效果不佳。

第一方面，本发明实施例提供一种基于定位标注的客服视频交互方法，包括由客服系统设备执行的如下步骤：

客服系统设备接收终端侧设备传输的视频信息并转发到客服侧设备上显示，其中，所述客服系统设备包括实体清单、识别算法和标注信息库；

所述客服系统设备根据目标实体选择所述识别算法，根据所述识别算法从所述视频信息更新的抽帧图像中识别是否存在所述目标实体，若存在，对所述目标实体进行位置识别，得到定位信息，其中，所述目标实体基于所述实体清单，通过所述客服侧设备输入的指定指令选定；

所述客服系统设备接收交互信息，并将所述交互信息和所述定位信息同步到所述终端侧设备和所述客服侧设备，以在所述终端侧设备和所述客服侧设备实现标注信息的显示，其中，所述交互信息基于所述标注信息库，通过所述客服侧设备获取。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述在所述客服系统设备根据所述目标实体选择所述识别算法之前，还包括：

所述客服平台系统每隔一预设的时间间隔，根据所述视频信息进行图像抽帧，得到所述视频信息更新的抽帧图像，其中，所述预设的时间间隔为1/3秒。

第二方面，本发明实施例还提供一种基于定位标注的客服视频交互方法，包括由客服侧设备执行的如下步骤：

客服侧设备接收客服系统设备转发的视频信息；

客服侧设备根据输入的指定指令，利用实体清单选定目标实体，其中，所述客服侧设备与客服系统设备处于通信连接，所述客服系统设备包括所述实体清单、识别算法和标注信息库；

基于所述标注信息库，所述客服侧设备获取客服人员编辑的交互信息；

所述客服侧设备将所述交互信息发送到所述客服系统设备；

所述客服侧设备接收所述客服系统设备同步发送的所述交互信息和定位信息，其中，所述定位信息为所述客服系统设备根据所述目标实体选择所述识别算法，并根据所述识别算法对所述视频信息更新的抽帧图像中识别的所述目标实体进行位置识别得到；