[发明专利]一种数据处理方法、装置及系统在审
申请号: | 201710146662.3 | 申请日: | 2017-03-13 |
公开(公告)号: | CN106940716A | 公开(公告)日: | 2017-07-11 |
发明(设计)人: | 董梁 | 申请(专利权)人: | 济南浪潮高新科技投资发展有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 济南信达专利事务所有限公司37100 | 代理人: | 李世喆 |
地址: | 250100 山东省济南市*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 系统 | ||
技术领域
本发明涉及数据处理技术领域,特别涉及一种数据处理方法、装置及系统。
背景技术
企业在业务处理过程中,相关业务将产生各种业务数据,这些业务数据蕴含着巨大的商业价值。因此,如何从业务数据中抽取出蕴含商业价值的信息成为企业制定商业决策的关键。
目前,很多企业依靠业务人员从相关业务的业务数据中识别要抽取的数据,再对业务数据进行抽取,最后将抽取的数据写入数据库。
然而企业相关业务产生的业务数据的数量庞大、且种类繁多。单纯依靠业务人员进行人工识别,并抽取,则会降低处理业务数据的效率。
发明内容
本发明实施例提供了一种数据处理方法、装置及系统,可以提高处理业务数据的效率。
第一方面,本发明实施例提供了一种数据处理方法,预先设置至少一组关联字段名称,还包括:确定待处理业务数据的至少一个第一字段名称,以及确定初始数据表的至少一个第二字段名称;
根据所述至少一组关联字段名称,从所述至少一个第一字段名称中确定出每一个所述第二字段名称分别对应的目标字段名称;
从所述业务数据中抽取每一个所述目标字段名称分别对应的元数据组;
将抽取的每一个所述元数据组写入所述初始数据表中的各个所述第二字段名称下。
优选地,在所述从所述业务数据中抽取每一个所述目标字段名称分别对应的元数据组之后,所述将抽取的每一个所述元数据组写入所述初始数据表中的各个所述第二字段名称下之前,进一步包括:
针对每一个抽取的所述元数据组,均执行:
A1,检测当前所述元数据组中的每一个元数据的数据格式是否均为预设数据格式;
A2,在当前所述元数据组中存在至少一个目标元数据的数据格式不是预设数据格式时,将当前所述元数据组中每一个所述目标元数据转换为预设数据格式的元数据。
优选地,所述预设数据格式,包括:整型格式、浮点型格式及二进制数据格式中的任意一种。
优选地,在从所述业务数据中抽取每一个所述目标字段名称分别对应的元数据组之后,所述将抽取的每一个所述元数据组写入所述初始数据表中的各个所述第二字段名称下之前,进一步包括:
确定所述目标字段名称的第一数量,以及确定所述元数据组中元数据的第二数量;
根据所述第一数量和所述第二数量构建显示表格;
将所述至少一个目标字段名称和每一个与所述目标字段名称相对应的所述元数据组对应写入所述显示表格,并显示。
优选地,在所述将抽取的每一个所述元数据组写入所述初始数据表中的各个所述第二字段名称下之后,进一步包括:
检测每一个所述元数据组是否成功写入所述初始数据表;
当检测到存在至少一个目标元数据组未成功写入所述初始数据表时,生成对应所述至少一条目标元数据组的提示信息,并提供。
第二方面,本发明实施例提供了一种数据抽取装置,包括:创建单元、选择单元、配置单元、数据抽取单元、数据写入单元;其中,
所述创建单元,用于预先设置至少一组关联字段名称;
所述选择单元,用于确定待处理业务数据的至少一个第一字段名称,以及确定初始数据表的至少一个第二字段名称;
所述配置单元,用于根据所述创建单元预先设置的至少一组关联字段名称,从所述选择单元确定的至少一个第一字段名称中确定出每一个所述第二字段名称分别对应的目标字段名称;
所述数据抽取单元,用于从所述业务数据中抽取每一个所述配置单元确定的目标字段名称分别对应的元数据组;
所述数据写入单元,用于将所述数据抽取单元抽取的每一个所述元数据组写入所述初始数据表中的各个所述第二字段名称下。
优选地,还包括:检测单元和修改单元;
所述检测单元,用于针对每一个所述抽取的元数据组,检测当前所述元数据组中的每一个元数据的数据格式是否均为预设数据格式;
所述修改单元,用于当前所述元数据组中存在至少一个目标元数据的数据格式不是预设数据格式,将当前所述元数据组中每一个所述目标元数据转换为预设数据格式的元数据。
优选地,还包括:统计单元、构建单元、显示单元;
所述统计单元,用于确定所述目标字段名称的第一数量,以及确定所述元数据组中元数据的第二数量;
所述构建单元,用于根据所述第一数量和所述第二数量构建显示表格;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮高新科技投资发展有限公司,未经济南浪潮高新科技投资发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710146662.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于索引表的查询的方法及设备
- 下一篇:一种高密封喷涂机泄压回油系统