[发明专利]业务操作辅助方法、装置、计算机设备和存储介质

权利要求书

1.一种业务操作辅助方法，其特征在于，所述方法包括：

在检测到目标对象与终端之间的当前交互状态满足预设条件时，确定当前业务场景，并获取所述当前业务场景中所述目标对象的历史操作序列；所述目标对象基于预设辅助系统的无接触交互功能进入所述当前业务场景；所述无接触交互功能包括眼动追踪功能和语音交互功能；

获取所述目标对象的无接触交互信息；所述无接触交互信息包括眼动追踪信息和/或语音对话信息；

将所述当前业务场景、所述历史操作序列、所述无接触交互信息输入至预训练的用户行为预测模型，得到预测操作行为；所述预测操作行为为所述预训练的用户行为预测模型基于所述当前交互状态，对所述当前业务场景中的下一个操作行为进行预测得到的预测结果；

展示所述预测操作行为对应的辅助操作信息，以向所述目标对象提供无接触交互业务服务。

2.根据权利要求1所述的方法，其特征在于，所述在检测到目标对象与终端之间的当前交互状态满足预设条件时，确定当前业务场景，包括：

在检测到目标对象与终端之间的当前交互状态满足预设条件时，获取当前交互页面；

基于预设的多个业务场景，将所述当前交互页面对应的业务场景作为所述当前业务场景；所述多个业务场景通过细化银行业务得到。

3.根据权利要求2所述的方法，其特征在于，所述获取所述目标对象的无接触交互信息，包括：

基于所述目标对象浏览所述当前交互页面时采集到的对象图像，追踪所述目标对象的眼动轨迹，得到所述眼动追踪信息；

在所述当前业务场景下，获取所述目标对象的历史对话记录，作为所述语音对话信息。

4.根据权利要求1所述的方法，其特征在于，所述辅助操作信息包括操作提示信息和操作询问信息，所述展示所述预测操作行为对应的辅助操作信息，包括：

基于所述预测操作行为生成所述操作提示信息并进行展示；

或，

基于所述预测操作行为生成所述操作询问信息并进行展示；

响应于所述目标对象针对所述操作询问信息的反馈信息，通过操作说明页面展示操作说明信息。

5.根据权利要求1所述的方法，其特征在于，所述将所述当前业务场景、所述历史操作序列、所述无接触交互信息输入至预训练的用户行为预测模型，得到预测操作行为，包括：

通过所述预训练的用户行为预测模型，基于所述当前业务场景对应的预设操作序列和所述历史操作序列，确定当前操作步骤；

根据所述当前操作步骤和所述无接触交互信息，对所述当前业务场景中的下一个操作行为进行预测，得到所述预测操作行为。

6.根据权利要求1至5任一项所述的方法，其特征在于，还包括：

获取训练样本数据；所述训练样本数据包括多个样本业务场景、各所述样本业务场景对应的样本操作序列、每个样本操作序列中的各操作步骤对应的样本无接触交互信息；所述样本无接触交互信息包括样本眼动追踪信息和/或样本语音对话信息；

基于所述多个样本业务场景、所述样本操作序列、所述样本无接触交互信息，对待训练的用户行为预测模型进行训练，得到所述预训练的用户行为预测模型。

7.根据权利要求6所述的方法，其特征在于，所述获取训练样本数据，包括：

针对每个业务场景，基于多个样本对象浏览所述样本业务场景对应的交互页面时采集到的样本对象图像，追踪各样本对象在所述样本业务场景对应的样本操作序列中的各操作步骤下的眼动轨迹，得到各所述操作步骤对应的样本眼动追踪信息；所述眼动轨迹包括视线焦点、视线轨迹、眼部动作；

针对每个样本业务场景，获取所述多个样本对象在所述样本业务场景对应的样本操作序列中的各操作步骤下的历史对话记录，作为各所述操作步骤对应的样本语音对话信息；所述历史对话记录包括所述操作步骤对应的指定关键字。