[发明专利]数据采集方法、装置、设备及计算机可读存储介质在审
| 申请号: | 201910761596.X | 申请日: | 2019-08-15 |
| 公开(公告)号: | CN110502513A | 公开(公告)日: | 2019-11-26 |
| 发明(设计)人: | 刘雪花 | 申请(专利权)人: | 中国平安财产保险股份有限公司 |
| 主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2455;G06F16/25 |
| 代理公司: | 44287 深圳市世纪恒程知识产权代理事务所 | 代理人: | 胡海国<国际申请>=<国际公布>=<进入 |
| 地址: | 518000 广东省深圳市福田区益田路*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 字段信息 数据采集 采集 基础代码 需求采集 运行结果 文档 预设 字段 计算机可读存储介质 读取 数据处理技术 代码运行 语句 调用 筛选 | ||
1.一种数据采集方法,其特征在于,所述数据采集方法包括以下步骤:
当接收到需求采集文档时,读取所述需求采集文档中的需求字段信息,并调用预设基础代码,将所述需求字段信息添加到所述预设基础代码的连接语句中,生成采集代码;
控制所述采集代码运行,生成运行结果,并根据所述运行结果确定与所述需求字段信息对应的目标字段,以及与各所述目标字段对应的数据表;
根据所述数据表的数量,将所述数据表形成目标数据表,并对所述目标数据表进行筛选,采集与所述需求字段信息对应的数据。
2.如权利要求1所述的数据采集方法,其特征在于,所述根据所述运行结果确定与所述需求字段信息对应的目标字段,以及与各所述目标字段对应的数据表的步骤包括:
读取所述运行结果中所述需求字段信息与所述预设基础代码中全字段对比的对比结果,并根据所述对比结果,确定所述全字段中与所述需求字段信息对应的目标字段;
读取所述运行结果中各所述目标字段对应的数据表名,并根据所述数据表名,确定与各所述目标字段对应的数据表。
3.如权利要求2所述的数据采集方法,其特征在于,所述根据所述数据表的数量,将所述数据表形成目标数据表的步骤包括:
判断各所述目标字段对应的数据表名是否具有唯一性,若具有唯一性,则判定所述数据表的数量为单个,否则判定所述数据表的数量为多个;
当所述数据表的数量为单个时,则将单个所述数据表确定为目标数据表;
当所述数据表的数量为多个时,则读取多个所述数据表中存储各类数据相关性的相关标识,并将所述相关标识生成为关联标识,对多个所述数据表关联,形成目标数据表。
4.如权利要求3所述的数据采集方法,其特征在于,所述对所述目标数据表进行筛选,采集与所述需求字段信息对应的数据的步骤包括:
读取所述需求采集文档中的筛选范围信息,并根据所述筛选范围信息对所述目标数据表进行初次筛选,生成初次筛选数据;
根据与各所述目标字段对应的数据表,对各所述初次筛选数据进行再次筛选,生成再次筛选数据,并将所述再次筛选数据设为与所述需求字段信息对应的数据进行采集。
5.如权利要求4所述的数据采集方法,其特征在于,所述将所述再次筛选数据设为与所述需求字段信息对应的数据进行采集的步骤包括:
判断所述目标数据表是否携带所述关联标识,若携带所述关联标识,则根据所述关联标识,将所述再次筛选数据关联,并将关联后的所述再次筛选数据设为与所述需求字段信息对应的数据进行采集;
若不携带所述关联标识,则将所述再次筛选数据设为与所述需求字段信息对应的数据进行采集。
6.如权利要求1-5任一项所述的数据采集方法,其特征在于,所述将所述需求字段信息添加到所述预设基础代码中的连接语句中,生成采集代码的步骤包括:
根据预设连接标识,确定所述预设基础代码中的连接语句,并根据预设变量标识,检测所述连接语句中的变量位置;
将所述需求字段信息添加到所述变量位置中,替换所述变量位置中的变量,并检测所述需求字段信息是否均添加到所述变量位置中;
若均添加到所述变量位置中,则将所述预设基础代码更新为采集代码。
7.如权利要求6所述的数据采集方法,其特征在于,所述控制所述采集代码运行,生成运行结果的步骤之前包括:
将所述采集代码和预设形式规则对比,判断所述采集代码中的各语句是否符合所述预设形式规则,其中,所述预设形式规则用于判断所述采集代码的正确性;
若各所述语句均符合所述预设形式规则,则执行控制所述采集代码运行,生成运行结果的步骤;
若各所述语句中存在不符合所述预设形式规则的异常语句,则基于所述异常语句输出提示修改信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安财产保险股份有限公司,未经中国平安财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910761596.X/1.html,转载请声明来源钻瓜专利网。





