[发明专利]题目识别方法、装置、电子设备及计算机存储介质

说明书

本申请实施例提供了一种题目识别方法、装置、电子设备及计算机存储介质，该题目识别方法包括：获取包含题目的目标图像；将目标图像输入预先训练完成的检测模型，得到题目的题目区域和题目中的文本区域；通过预先训练完成的编码器模型，对题目区域的图像部分进行编码，获得题目的编码向量，相较于利用题目类型识别模型对题目类型进行识别的方案，基于编码向量与预存的多种题目类型特征向量的匹配结果，获得题目的题目类型信息，提高了题目类型信息的准确性；基于题目中的文本区域进行文本识别，得到文本识别结果；根据题目类型信息和文本识别结果，进行题目构建，获得与目标图像中的题目对应的构建题目，提高了识别效率、降低了识别成本。

技术领域

本申请实施例涉及计算机技术领域，尤其涉及一种题目识别方法、装置、电子设备及计算机存储介质。

背景技术

随着在线教育的快速发展，众多教学辅助类产品应运而生。在教学过程中，上述产品可以为老师提供技术支持，减轻老师的工作量，例如：可以实现题目的自动批改、题目搜索等。通过对包含题目的图像进行题目识别，是实现题目批改、题目讲解等的基础。

现有技术中在对题目进行题目识别时，利用题目类型识别模型对图像中题目的题型进行区分，将与题型对应的题目用文本框框起来，从而确定题目的题型，然后结合横向文本行检测结果对文本框进行合并，以对题目中的题目内容进行后续处理。

然而，在根据题目类型识别模型对题目类型进行识别的方案中，当图像中出现新的题目类型时，需要重新收集新的题目类型相关的训练样本，同时还需要对这些训练样本进行标注，对题目类型识别模型进行重新训练，题目识别效率低下且成本较高。

发明内容

有鉴于此，本申请实施例提供一种题目识别方法、装置、电子设备及计算机存储介质，用以克服现有技术中存在的题目识别效率低且成本高的缺陷。

第一方面，本申请实施例提供了一种题目识别方法，所述方法包括：获取包含题目的目标图像；将所述目标图像输入预先训练完成的检测模型，得到所述题目的题目区域和所述题目中的文本区域；通过预先训练完成的编码器模型，对所述题目区域的图像部分进行编码，获得所述题目的编码向量，基于所述编码向量与预存的多种题目类型特征向量的匹配结果，获得所述题目的题目类型信息；基于所述题目中的文本区域进行文本识别，得到文本识别结果；根据所述题目类型信息、所述文本识别结果，进行题目构建，获得与所述目标图像中的题目对应的构建题目。

第二方面，本申请实施例提供了一种题目识别装置，所述装置包括：获取模块，用于获取包含题目的目标图像；检测模块，用于将所述目标图像输入预先训练完成的检测模型，得到所述题目的题目区域和所述题目中的文本区域；匹配模块，用于通过预先训练完成的编码器模型，对所述题目区域的图像部分进行编码，获得所述题目的编码向量，基于所述编码向量与预存的多种题目类型特征向量的匹配结果，获得所述题目的题目类型信息；识别模块，用于基于所述题目中的文本区域进行文本识别，得到文本识别结果；构建模块，用于根据所述题目类型信息、所述文本识别结果，进行题目构建，获得与所述目标图像中的题目对应的构建题目。

第三方面，本申请实施例提供了一种电子设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；所述存储器用于存放至少一个可执行指令，所述可执行指令使所述处理器执行如第一方面或第一方面的任意一个实施例中所述的题目识别方法对应的操作。

第四方面，本申请实施例提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如第一方面或第一方面的任意一个实施例中所述的题目识别方法。