[发明专利]应用于大数据分析中的文档解析处理方法、系统及装置有效
| 申请号: | 201711080717.1 | 申请日: | 2017-11-06 |
| 公开(公告)号: | CN108073678B | 公开(公告)日: | 2020-08-28 |
| 发明(设计)人: | 陈贤耿;纪晓阳;伍紫莹 | 申请(专利权)人: | 广东广业开元科技有限公司 |
| 主分类号: | G06F16/31 | 分类号: | G06F16/31;G06F16/903;G06Q40/00 |
| 代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 朱晓敏;胡辉 |
| 地址: | 510623 广东省广州市天*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 应用于 数据 分析 中的 文档 解析 处理 方法 系统 装置 | ||
1.应用于大数据分析中的文档解析处理方法,其特征在于:该方法包括以下步骤:
构建财务指标的正则表达式规则;
获取财务报表的起始特征指标和结束特征指标;
利用财务指标的正则表达式规则、起始特征指标和结束特征指标,对不同格式的文档进行财务报表的定位处理;
对财务报表内的数据进行定位处理后,记录财务数据以及与财务数据对应的指标名称和时间;
对属于数值型的数据进行单位换算后,记录换算后得到的数据;
所述构建财务指标的正则表达式规则这一步骤,具体包括以下步骤:
获取标准名称库,所述标准名称库中存储有财务指标的标准名称;
构建实际名称库,所述实际名称库中存储有从文档中提取得到的财务指标的实际名称;
建立实际名称库中的实际名称与标准名称库中的标准名称之间的名称映射关系;
根据名称映射关系,构建财务指标的正则表达式规则。
2.根据权利要求1所述应用于大数据分析中的文档解析处理方法,其特征在于:所述获取财务报表的起始特征指标和结束特征指标这一步骤,其具体包括:抽取多个包含财务报表的文档;
对每一个文档中的财务报表的起始内容进行指标提取,然后,根据提取出的指标的出现频次,按照从大到小的顺序,对指标进行排序,选取前m1个指标构建得到起始特征指标列表;
对每一个文档中的财务报表的结束内容进行指标提取,然后,根据提取出的指标的出现频次,按照从大到小的顺序,对指标进行排序,选取前m2个指标构建得到结束特征指标列表。
3.根据权利要求2所述应用于大数据分析中的文档解析处理方法,其特征在于:所述利用财务指标的正则表达式规则、起始特征指标和结束特征指标,对不同格式的文档进行财务报表的定位处理这一步骤,其具体包括:
根据财务报表表格出现的先后次序,为文档中的每一个财务报表表格配置对应的ID;
利用财务指标的正则表达式规则、起始特征指标和结束特征指标,对文档中的每一个财务报表表格进行解析判断,从而定位得出起始表格和结束表格,其中,所述起始表格指的是处于财务报表起始位置的财务报表表格,所述结束表格指的是处于财务报表结束位置的财务报表表格;
根据起始表格的ID和结束表格的ID,将起始表格的ID和结束表格的ID之间的所有ID所对应的财务报表表格中的数据,均标记为对应财务报表类型的财务数据。
4.根据权利要求3所述应用于大数据分析中的文档解析处理方法,其特征在于:所述利用财务指标的正则表达式规则、起始特征指标和结束特征指标,对文档中的每一个财务报表表格进行解析判断,从而定位得出起始表格和结束表格这一步骤,其具体包括:
当表格的起始标志为假值时,利用财务指标的正则表达式规则,从当前的财务报表表格的起始内容中识别提取出n1个指标,然后,将识别提取出的n1个指标与起始特征指标列表中的指标进行匹配后,得到第一匹配率,接着,当第一匹配率大于第一阈值时,则判定当前的财务报表表格为起始表格;
当表格的起始标志为真值时,利用财务指标的正则表达式规则,从当前的财务报表表格的结束内容中识别提取出n2个指标,然后,将识别提取出的n2个指标与结束特征指标列表中的指标进行匹配后,得到第二匹配率,接着,当第二匹配率大于第二阈值时,则判定当前的财务报表表格为结束表格;
其中,n1m1,n2m2。
5.根据权利要求1-4任一项所述应用于大数据分析中的文档解析处理方法,其特征在于:所述对财务报表内的数据进行定位处理后,记录财务数据以及与财务数据对应的指标名称和时间这一步骤,其具体包括:
建立财务报表表格中的数据所对应的指标名称与所在行数之间的第一映射关系;
建立财务报表表格中的数据所对应的时间信息与所在列数之间的第二映射关系;
利用财务报表表格中的数据所对应的行列数、第一映射关系及第二映射关系,记录财务数据以及与财务数据对应的指标名称和时间。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东广业开元科技有限公司,未经广东广业开元科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711080717.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





