[发明专利]一种文档检测的方法、服务器及计算机可读存储介质在审

专利信息
申请号: 201711468430.6 申请日: 2017-12-29
公开(公告)号: CN108021951A 公开(公告)日: 2018-05-11
发明(设计)人: 宋鹏举 申请(专利权)人: 北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司
主分类号: G06K9/62 分类号: G06K9/62;G06F17/30
代理公司: 工业和信息化部电子专利中心 11010 代理人: 张然
地址: 100085 北京*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 文档 检测 方法 服务器 计算机 可读 存储 介质
【说明书】:

发明公开了一种文档检测的方法、服务器及计算机可读存储介质,本发明通过构建预设文档的指纹库,再根据指纹库中的特征数据,对待检测文档进行相似度检测和文档重复度检测,以实现对待检测文档的相似度检测和文档重复度检测,从而有效解决了现有技术中对文档检测不准确的问题。

技术领域

本发明涉及计算机技术领域,特别是涉及一种文档检测的方法、服务器及计算机可读存储介质。

背景技术

文档类数据是企业单位中常见的数据类型,对于企业单位,有很多重要的数据是以文档类数据的形式存在,对重要文档类数据的内容有效保护,是企业安全中的重要组成部分。

现有技术包括两种方向,一种是文档相似程度的检测方式,该种检测方法不能有效检测文本块的重复内容,另一种是相同内容块的长度的检测方式,该种检测方法不能有效检测文档的相似程度,也就是说,现有技术都不能很准确的对文档进行检测。

发明内容

本发明提供了一种文档检测的方法、服务器及计算机可读存储介质,以解决现有技术中对文档检测不准确的问题。

一方面,本发明提供了一种文档检测的方法,该方法包括:构建预设文档的指纹库,所述指纹库用于存储所述预设文档的特征数据;根据所述指纹库中的特征数据,对待检测文档进行相似度检测和文档重复度检测。

进一步地,所述构建预设文档的指纹库,具体包括:抽取预设文档中的内容,采用局部敏感哈希算法生成所述预设文档的特征词和特征字,并获取所述预设文档中的语句块,将所述特征词、所述特征字和所述语句块存入指纹库。

进一步地,根据所述指纹库中的特征数据,对待检测文档进行相似度检测和文档重复度检测,具体包括:根据所述指纹库和待检文档的特征数据,对待检文档和预设文档进行相似度检测,并对待检文档和预设文档进行文档重复度检测。

进一步地,该方法还包括:抽取所述待检文档的特征数据。

进一步地,所述抽取所述待检文档的特征数据,具体包括:采用局部敏感哈希算法抽取所述待检文档的特征词和特征字,并获取所述预设文档中的语句块。

进一步地,所述对待检文档和预设文档进行文档重复度检测,具体包括:

判断待检文档中是否存在预设文档中的语句块,如果是,则记录待检文档存在所述语句块的个数,否则,则判定待检文档与所述预设文档不存在重复。

进一步地,判断待检文档中是否存在预设文档中的语句块,具体包括:判断待检文档中是否存在,与预设文档中的语句块意思相同,且与所述语句块的字数的差值在预设字数范围内的语句块,如果是,则确定待检文档存在所述语句块。

进一步地,所述特征数据包括以下中的一种或多种:特征字、特征词和语句块。

另一方面,本发明还提供一种服务器,所述服务器包括处理器、存储器及通信总线;

所述通信总线用于实现处理器和存储器之间的连接通信;

所述处理器用于执行存储器中存储的计算机指令,以实现上述任一种所述的文档检测的方法。

再一方面,本发明还提供一种计算机可读存储介质,计算机可读存储介质存储有一个或者多个程序,一个或者多个程序可被一个或者多个处理器执行,以实现本发明提供的任一种所述的文档检测的方法。

本发明有益效果如下:

本发明通过构建预设文档的指纹库,再根据指纹库中的特征数据,对待检测文档进行相似度检测和文档重复度检测,以实现对待检测文档的相似度检测和文档重复度检测,从而有效解决了现有技术中对文档检测不准确的问题。

附图说明

图1是本发明实施例的一种文档检测的方法的流程示意图;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司,未经北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201711468430.6/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top