[发明专利]一种问题意图识别方法、装置、存储介质及电子设备

说明书

本申请提供一种问题意图识别方法、装置、存储介质及电子设备，应用于人工智能的自然语言处理方向，对于问答数据的问答对，能够结合答案确定其问题的意图，由此确定模型需要对问题做哪些推理才能获得答案。而在结合答案对问题意图分类的过程中，本申请在问答对的上下文文本中确定答案相关的文本片段，使用文本片段的文本处理结果修正答案的文本处理结果，由此提高问题意图分类的准确性。此外，本申请中文本处理涉及词性识别和命名实体识别，由此本申请的启发式问题意图识别算法至少结合了词性识别和命名识别，这就能够最大限度保证文本处理的全面性，避免单一技术的处理带来的分类误差。

技术领域

本申请涉及人工智能技术领域，更具体地说，涉及一种问题意图识别方法、装置、存储介质及电子设备。

背景技术

问题意图，即为获得问题的答案，模型需要对问题所做的推理。目前，对于问题意图的研究尚在初始阶段，在诸如SQuAD、HotpotQA等问题数据集中都只是简单通过识别问题中的核心问题词组对问题意图做简单分类。

但由于问题模式众多，仅靠人工定义核心问题词组的方式难以涵盖所有问题模式。

发明内容

有鉴于此，本申请提供一种问题意图识别方法、装置、存储介质及电子设备，以提高问题意图分类的准确性。

为实现上述目的，一方面，本申请提供了一种问题意图识别方法，所述方法包括：

获取待识别的问答数据，所述问答数据包括一个包含问题和答案的问答对、以及所述问答对在所属文章中的上下文文本；

在所述上下文文本中确定与所述答案相同的文本片段，并分别获取所述文本片段和所述答案的文本处理结果，所述文本处理结果包括词性标注结果和实体标注结果；

根据所述文本片段的词性标注结果修正所述答案的词性标注结果，以及根据所述文本片段的实体标注结果修正所述答案的实体标注结果；

至少基于所述答案修正后的词性标注结果和修正后的实体标注结果，对所述问题进行意图分类。

在一种可能的实现方式中，所述根据所述文本片段的词性标注结果修正所述答案的词性标注结果，包括：

统计所述文本片段的词性标注结果的分布概率；

将分布概率最高的一个词性标注结果作为所述答案的词性标注结果。

在又一种可能的实现方式中，所述根据所述文本片段的实体标注结果修正所述答案的实体标注结果，包括：

获取所述文本片段的实体标注结果中第一实体的实体标签、以及所述答案的实体标注结果中第二实体的实体标签；

对所述第一实体和所述第二实体进行合并去重，得到第三实体；

根据所述第三实体在所述文本片段的实体标注结果、以及所述答案的实体标注结果中的实体标签中的至少一个，确定所述第三实体的目标实体标签，所述第三实体的目标实体标签属于所述答案修正后的实体标注结果。

在又一种可能的实现方式中，所述根据所述第三实体在所述文本片段的实体标注结果、以及所述答案的实体标注结果中的实体标签中的至少一个，确定所述第三实体的目标实体标签，包括：

如果所述第三实体在所述文本片段的实体标注结果中的实体标签为多种，则将所述第三实体的多种实体标签中出现频次最高的一种实体标签作为所述第三实体的目标实体标签。

在又一种可能的实现方式中，所述至少基于所述答案修正后的词性标注结果和修正后的实体标注结果，对所述问题进行意图分类，包括：

如果所述答案修正后的实体标注结果中包含多个实体、且所述多个实体在所述答案修正后的实体标注结果中的实体标签属于同一种，识别所述答案修正后的词性标注结果中除所述多个实体外的其他词组的词性；