[发明专利]基于移动轨迹的框题方法、装置、电子设备及存储介质

说明书

本发明实施例涉及智能设备技术领域，公开了一种基于移动轨迹的框题方法、装置、电子设备及存储介质。该方法包括：当接收到框题指令时，开启摄像头识别操作体在承载体上的移动轨迹；利用移动轨迹和预设规则对承载体拍照，得到粗框图像；当移动轨迹为连续轨迹时，确定移动轨迹在粗框图像中的起点坐标和终点坐标，并获取粗框图像中起点坐标和终点坐标之间任意行的字符形成的基准直线；在起点坐标和终点坐标之间的连线与基准直线不平行时，基于起点坐标和终点坐标分别构建第一直线和第二直线；构建选择框，获取选择框内字符的图片。实施本发明实施例，只要基于起点坐标和终点坐标构建第一直线和第二直线即可得到选择框，操作更加方便。

技术领域

本发明涉及智能设备技术领域，具体涉及一种基于移动轨迹的框题方法、装置、电子设备及存储介质。

背景技术

为了解决中小学的作业难题，目前，市场上出现了很多解决学生作业难题的搜题或错题汇总类应用程序，这些应用程序都是通过摄像头拍摄题目图片以作为错题保存或用来搜索对应的答案。其实现方法大致分为三种：

第一种是通过手动拖到裁剪框的方式框选自己想要的题目，这种方式想要多次操作裁剪框，以使裁剪框变大或变小，才能精确获取题目图片，该方式操作不方便，比较繁琐。

第二种是基于承载体上使用操作体选取一个点，然后根据这个点进行拍照并基于预设规则以一定的训练模型得到题目图片，其较第一种方式更加智能，但是由于识别现象通常集中在一个点的范围内，可能会造成获取的内容图片不完整或者存在无效信息，搜题的结果容易出错。

第三种方式是基于轨迹的方式，例如使用操作体在承载体上移动，使得移动轨迹形成闭合曲线框，摄像头识别移动轨迹，智能设备基于移动轨迹将闭合曲线框内的内容框选出，或者使得承载体上以待框选内容的起点坐标和终点坐标作为移动轨迹的两端，然后基于该起点坐标和终点坐标作为对角线构建矩形框，得到矩形框内的内容。

闭合曲线框的方式，因为操作体在移动时，并非显性显示，极易造成用户绘制不完整的情况出现，则智能终端就无法识别到该选择框，可能需要与用户多次交互才能完成，影响用户体验，而对于起点坐标和终点坐标作为对角线的情况，如果待框选内容的首个字符没有缩进，或者最后一个字符在最后一个的末尾，则较为容易矩形框并确定框选内容，如图1所示，矩形框14根据移动轨迹11的起点坐标12和终点坐标13形成的对角线得到。事实上，很多时候，待框选题目不可能的首行和末行不可能与中间行一样，占满该行，这种情况下，起点坐标和终点坐标没有参照物，得到的矩形框内的内容很可能不完整，如图2所示，由于起点和终点位置不易把握，因此，根据移动轨迹21的起点坐标22和终点坐标23形成的对角线得到的矩形框24则无法框取到完整的内容。

发明内容

针对所述缺陷，本发明实施例公开了一种基于移动轨迹的框题方法、装置、电子设备及存储介质，其保证框取题目精准的同时，操作更加方便。

本发明实施例第一方面公开一种基于移动轨迹的框题方法，所述方法包括：

当接收到框题指令时，开启摄像头识别用户通过操作体在承载体上的移动轨迹；

利用所述移动轨迹和预设规则对所述承载体拍照，得到粗框图像；

当所述移动轨迹为连续轨迹时，确定所述移动轨迹在粗框图像中的起点坐标和终点坐标，并获取粗框图像中所述起点坐标和终点坐标之间任意行的字符形成的基准直线；

在所述起点坐标和终点坐标之间的连线与所述基准直线不平行时，基于所述起点坐标和终点坐标分别构建与所述基准直线平行的第一直线和第二直线；

以所述第一直线和第二直线以及粗框图像位于所述第一直线和第二直线之间的边缘构建选择框，获取所述选择框内字符的图片。

作为一种可选的实施方式，在本发明实施例第一方面中，基于所述起点坐标和终点坐标分别构建与所述基准直线平行的第一直线和第二直线包括：