[发明专利]公式识别方法、装置、电子设备及存储介质

说明书

本公开提供了一种公式识别方法、装置、电子设备及存储介质。该方法包括：获取包含公式的待识别图像；基于解码器网络对所述公式的树结构进行识别，得到所述树结构的节点；确定下一节点的类型，其中，所述下一节点为通过对当前节点进行解析得到的节点；响应于确定所述下一节点的类型为结构节点，基于所述解码器网络的结构分支，确定所述结构节点包括的子树的根节点；基于所述子树的根节点，确定所述子树包括的一个或多个子节点；基于所述子树包括的一个或多个子节点，确定目标公式。由此，可以提高对公式识别的精度。

技术领域

本公开涉及人工智能技术领域，尤其涉及公式识别方法、装置、电子设备及存储介质。

背景技术

随着线上教学的普及，公式识别的应用需求越来越多。在公式识别场景中，多是用户使用手机、平板电脑等电子设备对待识别的公式进行拍摄，以获得待识别图像。在一些场景下，待识别的公式可能是手写的，由于撰写者撰写方式或撰写风格的不同，手写公式的识别较为复杂。目前，存在对手写公式进行识别的方案，但这些方案对手写公式的识别准确率较低，有待提高。

发明内容

根据本公开的一方面，提供了一种公式识别方法，包括：

获取包含公式的待识别图像；

基于解码器网络对该公式的树结构进行识别，得到该树结构的节点；

确定下一节点的类型，其中，该下一节点为通过对当前节点进行解析得到的节点；

响应于确定该下一节点的类型为结构节点，基于该解码器网络的结构分支，确定该结构节点包括的子树的根节点；

基于该子树的根节点，确定该子树包括的一个或多个子节点；

基于该子树包括的一个或多个子节点，确定目标公式。

根据本公开的另一方面，提供了一种公式识别装置，包括：

获取模块，配置为获取包含公式的待识别图像；

识别模块，配置为基于解码器网络对该公式的树结构进行识别，得到该树结构的节点；

第一确定模块，配置为确定下一节点的类型，其中，该下一节点为通过对当前节点进行解析得到的节点；

第二确定模块，配置为响应于确定该下一节点的类型为结构节点，基于该解码器网络的结构分支，确定该结构节点包括的子树的根节点；

第三确定模块，配置为基于该子树的根节点，确定该子树包括的一个或多个子节点；

第四确定模块，配置为基于该子树包括的一个或多个子节点，确定目标公式。

根据本公开的另一方面，提供了一种电子设备，包括：

至少一个处理器；以及

与该至少一个处理器通信连接的存储器；其中，

该存储器存储有可被该至少一个处理器执行的指令，该指令被该至少一个处理器执行，以使该至少一个处理器能够执行本公开任一实施例所提供的方法。

根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，该计算机指令用于使该计算机执行本公开任一实施例所提供的方法。

采用本公开，可以获取包含公式的待识别图像，基于解码器网络对该公式的树结构进行识别，得到该树结构的节点。可以确定下一节点的类型，并在确定该下一节点的类型为结构节点时，基于该解码器网络的结构分支，确定该结构节点包括的子树的根节点。并且，还可以基于该子树的根节点，确定该子树包括的一个或多个子节点，进而根据该子树包括的一个或多个子节点，确定目标公式。由此，可以提高对公式识别的准确性。