[发明专利]一种基于AR眼镜的书画关联比对分析方法与系统

说明书

本发明公开了一种基于AR眼镜的书画关联比对分析方法与系统，包括印章检测模块、印章检索模块和用户交互模块，所述印章检测模块包括书画作品图像模块，所述书画作品图像模块连接有书画作品数据集模块，所述书画作品数据集模块连接有印章检测模块模块，所述印章检索模块包括印章图像模块，所述印章图像模块连接有印章图像预处理与校正模块，所述印章图像预处理与校正模块连接有检索模型模块，所述用户交互模块包括输入图像模块，所述输入图像模块和印章检测模型模块连接有检测结果模块。本发明提出了一个较为完整的交互式书画检索系统，实现了书画作品中的印章检测，并结合印章的特征对相关书画作品进行高效率的检索。

技术领域

本发明涉及书画作品技术领域，具体为一种基于AR眼镜的书画关联比对分析方法与系统。

背景技术

古代书画作品是研究古代艺术史发展和不同朝代人文历史的重要途径。当前国内外对于中国古代书画作品的研究主要通过对书画作品结构信息和主体内容信息进行分析，而忽略了作者和收藏者所盖的印章包含的重要特征信息。现存的书画作品真假混杂，且数量庞大，存储极为分散，缺乏完整的数据库与包含作品之间关联关系的知识网络，对于人文工作者的研究造成了一些困难。考虑到印章中的信息极为重要，本技术结合书画作品中印章图像的特征，实现了相关书画作品的检索，并将系统移植到安卓移动端，使用了AR眼镜技术，以更好地辅助人文工作者进行书画作品的比对以及不同书画作品间关联关系的挖掘。

在书画作品比对与关联关系挖掘领域缺乏相关技术研究基础，工作繁琐，易出差错；书画作品相关现有技术主要应用于单一场景，如印章鉴别、书画作品生成、风格迁移等领域，缺乏统一方法与数据；且现有技术在准确率不够高、计算较慢，尚未得到广泛落地应用。

发明内容

本发明的目的在于提供一种基于AR眼镜的书画关联比对分析方法与系统，

本发明是这样实现的：

一种基于AR眼镜的书画关联比对分析方法与系统，包括印章检测模块、印章检索模块和用户交互模块，所述印章检测模块包括书画作品图像模块，所述书画作品图像模块连接有书画作品数据集模块，所述书画作品数据集模块连接有印章检测模块模块，所述印章检索模块包括印章图像模块，所述印章图像模块连接有印章图像预处理与校正模块，所述印章图像预处理与校正模块连接有检索模型模块，所述用户交互模块包括输入图像模块，所述输入图像模块和印章检测模型模块连接有检测结果模块，所述检测结果模块连接有输入印章图像模块，所述输入印章图像模块与所述印章图像预处理与校正模块的输入端连接，所述用户交互模块还设有检索结果模块，所述检索模型模块与所述检索结果模块的输入端连接。所述用户交互模块通过手机APP进行信息交互。所述印章检测模块和印章检索模块集成在服务器中，所述服务器通过互联网与用户交互模块无线连接，并且所述用户交互模块为智能手机或平板电脑，通过用户交互模块连接有AR眼镜。

进一步，基于AR眼镜的书画关联比对分析方法，具体按以下步骤执行：

S₁：首先使用网络上搜集831张书画作品清晰正面图像，存储到印章检测模块中的书画作品数据集模块中，使用Labelme工具，对书画作品图像中的印章进矩形标注，用印章左上角和右下角两个点的坐标描述该印章在原书画作品中的位置，保存结果用于训练，并收敛得到印章检测模型；

S₂：通过印章检测模块，通过目标检测算法Yolov4从书画作品图像中自动化地检测印章并框出；

该算法主要采用一个单独的CNN模型来实现端到端的目标检测。首先将一张输入的图像重设大小为448×448，并将其输入CNN网络，最后处理CNN网络预测的结果，得到检测的目标。