[发明专利]一种数据存储方法及系统有效

专利信息
申请号: 201710037747.8 申请日: 2017-01-18
公开(公告)号: CN106844617B 公开(公告)日: 2018-11-30
发明(设计)人: 蒋勇青;张勇;曹利娜 申请(专利权)人: 北京万方数据股份有限公司
主分类号: G06F17/30 分类号: G06F17/30
代理公司: 北京润平知识产权代理有限公司 11283 代理人: 顾问;肖冰滨
地址: 100038*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 数据 存储 方法 系统
【说明书】:

发明涉及数据处理领域,公开了一种数据存储方法及系统。其中,所述数据存储方法包括:根据预设的标准规则对源数据进行格式调整;将经过格式调整的源数据导入到数据库模块中;根据预设的验证规则对所述数据库模块中的源数据进行验证;将符合所述预设规则的源数据形成表单;以及按照预设的数据范围将表单数据写入存储器中。本发明的数据存储方法及系统在数据写入存储器之前,通过标准规则对数据进行筛选,并通过验证规则进行验证,从而对待存储数据进行了合理性筛查,并最终只保存合理的数据,保证了数据的准确性。

技术领域

本发明涉及数据处理领域,具体地,涉及一种数据存储方法及系统。

背景技术

目前,在数据存储过程中,特别是向存储器等机制读入数据的过程中,有可能存在数据读入错误的情况,不能保证数据的准确性和合理性。而数据存储属于数据处理的基础环节,一个数据的错误往往会导致后续整个数据处理过程的不合理,造成不可挽回的错误,且现今已进入大数据时代,对存储错误的数据进行修复会花费大量的人工成本和计算机成本。因此,需要新的技术方案来保证数据存储的准确性和合理性。

发明内容

本发明的目的是提供一种数据存储方法及系统,用于保证数据存储的准确性和合理性。

为了实现上述目的,本发明提供一种数据存储方法,该数据存储方法包括:根据预设的标准规则对源数据进行格式调整;将经过格式调整的源数据导入到数据库模块中;根据预设的验证规则对所述数据库模块中的源数据进行验证;将符合所述预设规则的源数据形成表单;以及按照预设的数据范围将表单数据写入存储器中。

可选地,所述根据预设的标准规则对源数据进行格式调整包括:比较源数据与预设的标准表单,以获得标准差异;基于所述标准差异设置标准规则;以及按照所述标准规则对所述源数据进行格式调整。

可选地,所述按照所述标准规则对所述源数据进行格式调整包括对所述源数据进行以下任意一者或多者的格式调整:数据长度的调整、数据格式的调整、数据值域的调整、数据验证规则的调整以及数据缺失字段的调整。

可选地,所述根据预设的验证规则对所述数据库模块中的源数据进行验证包括:按字段顺序,逐个调取所述验证规则对所述源数据进行验证,若存在不符合所述验证规则的字段,则跳过该不符合所述验证规则的字段,并调取所述验证规则验证下一个字段。

可选地,所述数据存储方法还包括:对于不符合所述预设规则的源数据,生成错误提示信息。

可选地,所述数据存储方法还包括:根据数据的业务特征确定所述表单的数据分割字段,再根据所述数据分割字段建立所述表单的子表;以及基于所述子表查询指定数据。

本发明还提供了一种数据存储系统,该数据存储系统包括:数据调整模块,用于根据预设的标准规则对源数据进行格式调整;数据导入模块,用于将经过格式调整的源数据导入到数据库模块中;数据验证模块,用于根据预设的验证规则对所述数据库模块中的源数据进行验证;表单形成模块,用于将符合所述预设规则的源数据形成表单;以及数据写入模块,用于按照预设的数据范围将表单数据写入存储器中。

可选地,所述数据调整模块包括:标准差异获取模块,用于比较源数据与预设的标准表单,以获得标准差异;标准规则设置模块,用于基于所述标准差异设置标准规则;以及格式调整模块,用于按照所述标准规则对所述源数据进行格式调整。

可选地,所述数据存储系统还包括:错误提示模块,用于对于不符合所述预设规则的源数据,生成错误提示信息。

可选地,所述数据存储系统还包括:子表建立模块,用于根据数据的业务特征确定所述表单的数据分割字段,再根据所述数据分割字段建立所述表单的子表;以及数据查询模块,用于基于所述子表查询指定数据。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京万方数据股份有限公司,未经北京万方数据股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710037747.8/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top