[发明专利]基于题目的辅导策略提供方法、系统、装置及介质

说明书

本发明涉及图像处理技术领域，特别适用于拍照搜题，针对目前存在辅助指导教学策略与输入的题目影像中的题目内容可能不对应的情况，提出了本发明的基于题目的辅导策略提供方法、系统、装置及介质，旨在解决如何通过计算机处理图像搜索题目能更准确地提供相应辅导策略的技术问题。为此，本发明的方法通过题目图像的文本信息结合该图像的特征图片搜索并经相似度计算、机器学习模型、图像信息匹配度等方式预测搜索到的文本题目与题目图像的匹配程度，获得最高程度的题目作为检测结果以提供相应的各种辅导策略。从而提升了特定图像搜索效率并能准确提供辅导策略。

技术领域

本发明属于图像处理技术领域，特别适用于影像与文本匹配处理，更具体的是涉及一种基于题目的辅导策略提供方法、系统、装置及介质。

本发明中所称的题目是指包括但不限于线上或线下的用户练习册、答题卡、答题卷、作业本等各种相关的试题或问题的内容。

背景技术

现有技术中，线上或线下教学或辅助教学/辅导时，可以进行影像采集相应的题目图像，提供给其他人(导师/教师/专家/同学等)或机器，统称线上或线下的辅导者，进行指导、评分或教学等。

但现有技术中，辅导者仅基于搜索结果进行教学、指导或评分等辅导，并不能确定影像中的欲搜索题目是否真正匹配上了题库中实际存储的正确的文本题目，进而也不能正确引导用户获得正确匹配的辅导者进行辅导，即无法准确地、正确地确定找到的题目是否确实对应影像的内容，无法准确提供与题目相匹配的辅导者或者学习辅导策略等，导致无法获得良好的用户体验。

因而，需要改进现有的根据题目影像提供教学辅导学习策略的方案，以保证策略的正确性、准确性，并提高效率，提升用户的良好体验。

发明内容

(一)要解决的技术问题

本发明旨在解决如何经计算机处理为题目确定相匹配的辅导策略的技术问题；进一步，如何通过计算机实现根据题目影像的检索处理以及匹配度高低，更准确地定位题目和相应的辅导策略的技术问题，从而在搜索题目图像确定题目的基础上结合匹配度为相应的用户提供正确的、更匹配的学习辅导策略，以获得更恰当的辅导，进而，无需用户自行反复确定辅导是否符合需求而提升学习辅导效率，有效提高搜题的准确性以及获得辅导策略的准确性，提升用户体验。

(二)技术方案

为解决上述技术问题，本发明的第一方面提出基于题目的辅导策略提供方法，包括：获取与题目对应的检索结果以及所述题目与各检索结果的匹配度；根据所述匹配度，提供对应的辅导策略。

根据本发明的优选实施方式，获取所述题目与各检索结果的匹配度，包括：获取所述题目的识别文本，所述识别文本为所述题目的影像图片经文字识别得到；将所述识别文本与各检索结果的文本题目进行匹配度检测，以获取各检索结果的匹配度。

根据本发明的优选实施方式，获取所述题目与各检索结果的匹配度，包括：通过基于相似度的预测模型、端到端神经网络模型、以及图像匹配度检测三种方式中的一种或多种，计算所述题目与各检索结果的匹配度；其中，所述图像匹配度检测指所述题目的影像图片与各所述检索结果的资源图像的匹配度检测。

根据本发明的优选实施方式，所述辅导策略包括下列中的一项或多项：文字解答、视频解答、在线解答。

根据本发明的优选实施方式，根据所述匹配度，提供对应的辅导策略，包括：将所述题目的各检索结果按照所述匹配度的分值从高到低的顺序依次显示对应的文字解答的内容；对所述匹配度分值最高的所述检索结果还提供视频解答和/或在线解答。