[发明专利]数据解析方法、装置、计算机设备和可读存储介质在审
申请号: | 202010916842.7 | 申请日: | 2020-09-03 |
公开(公告)号: | CN112036144A | 公开(公告)日: | 2020-12-04 |
发明(设计)人: | 张彬;李果成;应洪峰 | 申请(专利权)人: | 广联达科技股份有限公司 |
主分类号: | G06F40/18 | 分类号: | G06F40/18;G06F40/174;G06F40/186;G06K9/00;G06K9/62;G06F16/23 |
代理公司: | 北京英特普罗知识产权代理有限公司 11015 | 代理人: | 程超 |
地址: | 100000 北京市海淀区西*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 解析 方法 装置 计算机 设备 可读 存储 介质 | ||
1.一种数据解析方法,其特征在于,包括:
获取待解析表格图片;
将所述待解析表格图片识别为表格文件,得到初始表格文件;
根据预配置的解析模板解析所述初始表格文件,以得到若干条数据记录;
将所述数据记录写入标准表格文件;以及
将所述标准表格文件与历史记录库进行匹配,以确定新增数据记录或修改数据记录;
根据所述新增数据记录或所述修改数据记录更新所述历史记录库,得到所述待解析表格图片对应的数据记录库。
2.根据权利要求1所述的数据解析方法,其特征在于,所述待解析表格图片包括若干类表格,根据预配置的解析模板解析所述初始表格文件,以得到若干条数据记录的步骤包括:
获取解析模板列表,其中,所述解析模板列表包括所述解析模板所解析的表格的标题;
读取所述初始表格文件中一行内容得到行文本;
判断所述解析模板列表中是否存在与所述行文本匹配的标题;
若不存在,根据当前解析模板将所述行文本解析为一条数据记录,并将解析得到的所述数据记录写入所述标准表格文件;
若存在,将所述匹配的标题对应的解析模板作为所述当前解析模板。
3.根据权利要求2所述的数据解析方法,其特征在于,所述数据记录包括若干字段,所述解析模板包括用于解析每个所述字段的解析规则,根据当前解析模板将所述行文本解析为一条数据记录的步骤包括:
根据解析模板中的解析规则从所述行文本中提取对应的字段内容;
根据从所述行文本中提取到的所有字段内容构建所述数据记录。
4.根据权利要求3所述的数据解析方法,其特征在于,所述数据记录包括第一字段和第二字段,根据当前解析模板将所述行文本解析为一条数据记录的步骤还包括:
当根据所述第一字段对应的解析规则从所述行文本中提取不到字段内容时,根据相邻数据记录中的第一字段的字段内容构建所述数据记录,其中,所述相邻数据记录为根据所述初始表格文件中上一行内容得到的数据记录;
当根据所述第二字段对应的所述解析规则从所述行文本中提取出所述第二字段的字段内容时,对提取出的所述第二字段的字段内容进行校验,并在校验合法时,根据从所述第二字段的字段内容构建所述数据记录。
5.根据权利要求1所述的数据解析方法,其特征在于,将所述标准表格文件与历史记录库进行匹配,以确定新增数据记录或修改数据记录的步骤包括:
将所述标准表格文件中的数据记录与所述历史记录库中的历史记录进行匹配;
当所述数据记录在所述历史记录库中没有匹配到历史记录时,确定所述数据记录为所述新增数据记录;
当所述数据记录在所述历史记录库中匹配到历史记录,且被匹配到的历史记录与所述数据记录唯一匹配时,计算所述数据记录与所述被匹配到的历史记录的第一相似度,当所述第一相似度不超过预设相似度阈值时,确定所述数据记录为对所述被匹配到的历史记录的修改数据记录;以及
当两条或两条以上所述数据记录在所述历史记录库中匹配到同一条历史记录时,计算各条所述数据记录与所述同一条历史记录的相似度并获取最大的第二相似度,当所述第二相似度不超过所述预设相似度阈值时,确定所述第二相似度对应的数据记录为对所述同一条历史记录的修改数据记录。
6.根据权利要求5所述的数据解析方法,其特征在于,所述计算所述数据记录与所述历史记录的相似度的步骤包括:
根据所述数据记录与所述历史记录的价格字段中数值的差值计算第一相似因子,其中,所述差值越小,所述第一相似因子越大;
根据计算所述数据记录与所述历史记录的文本相似度计算第二相似因子,其中,所述文本相似度越高,所述第二相似因子越大;以及
根据所述第一相似因子和所述第二相似因子计算所述相似度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广联达科技股份有限公司,未经广联达科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010916842.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种干法真空绝热板用芯材及其制备方法
- 下一篇:一种医疗垃圾安全型处理装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置