[发明专利]数据处理方法、装置、电子设备及可读存储介质在审
| 申请号: | 202011585583.0 | 申请日: | 2020-12-28 |
| 公开(公告)号: | CN112733199A | 公开(公告)日: | 2021-04-30 |
| 发明(设计)人: | 何立伟;邹佳辰 | 申请(专利权)人: | 北京极豪科技有限公司 |
| 主分类号: | G06F21/64 | 分类号: | G06F21/64;G06F9/445;G06F16/178 |
| 代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 余菲 |
| 地址: | 102200 北京市昌平区沙*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据处理 方法 装置 电子设备 可读 存储 介质 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
读取配置文件,所述配置文件包括对目标数据的存储格式信息的校验规则;
利用所述配置文件对所述目标数据的存储格式信息进行校验,获得校验结果;
确定所述校验结果中所述存储格式信息中存在有误的目标信息;
输出所述目标信息。
2.根据权利要求1所述的方法,其特征在于,所述利用所述配置文件对所述目标数据的存储格式信息进行校验,获得校验结果,包括:
解析获得所述目标数据的存储路径以及所述存储路径下的各个存储节点;
利用所述配置文件对所述存储路径以及所述各个存储节点的存储格式信息进行校验,获得校验结果。
3.根据权利要求2所述的方法,其特征在于,所述利用所述配置文件对所述存储路径以及所述各个存储节点的存储格式信息进行校验,获得校验结果,包括:
利用所述配置文件对所述各个存储节点的节点信息以及最底层存储节点下的目标数据的存储格式信息进行校验,获得第一校验结果;
利用所述配置文件对所述存储路径的数据存储组织格式进行校验,获得第二校验结果;
其中,所述校验结果包括所述第一校验结果和所述第二校验结果。
4.根据权利要求3所述的方法,其特征在于,所述利用所述配置文件对所述各个存储节点的节点信息进行校验,获得第一校验结果,包括:
提取所述各个存储节点的节点信息中的关键字段;
通过所述配置文件中针对字段设置的正则表达式对所述各个存储节点的节点信息中的关键字段的字段表示方式进行校验,获得对应的第一子校验结果;其中,所述第一校验结果包括所述第一子校验结果。
5.根据权利要求3所述的方法,其特征在于,所述利用所述配置文件对所述各个存储节点的节点信息进行校验,获得第一校验结果,包括:
提取所述各个存储节点的节点信息中的关键字段;
利用所述配置文件对各个存储节点的节点信息中的关键字段是否缺失进行校验,获得对应的第二子校验结果;其中,所述第一校验结果包括所述第二子校验结果。
6.根据权利要求5所述的方法,其特征在于,所述利用所述配置文件对各个存储节点的节点信息中的关键字段是否缺失进行校验,获得对应的第二子校验结果,包括:
通过所述配置文件中针对字段设置的正则表达式匹配各个存储节点的节点信息中的关键字段,获得匹配的关键字段;
判断所述匹配的关键字段是否存在所述配置文件中记录的字典中,获得对应的第二子校验结果。
7.根据权利要求3所述的方法,其特征在于,所述利用所述配置文件对最底层存储节点下的目标数据的存储格式信息进行校验,获得第一校验结果,还包括:
利用所述配置文件对最底层存储节点下的目标数据的大小进行校验;和/或
对所述最底层存储节点下的目标数据对应的meta信息进行校验,获得对应的第三子校验结果,所述第一校验结果包括所述第三子校验结果。
8.根据权利要求3所述的方法,其特征在于,所述利用所述配置文件对所述存储路径的数据存储组织格式进行校验,获得第二校验结果,包括:
提取所述各个存储节点的节点信息中的关键字段;
按照所述存储路径确定各个关键字段的目录层级关系;
利用所述配置文件根据所述各个关键字段的目标层级关系进行数据存储组织格式的校验,获得对应的第二校验结果。
9.根据权利要求1-8任一所述的方法,其特征在于,所述方法还包括:
对所述目标信息进行修正,获得修正记录文件,所述修正记录文件为对所述目标数据中的目标信息进行修正后获得的目标数据。
10.根据权利要求9所述的方法,其特征在于,所述方法还包括:
基于所述修正记录文件对所述目标数据的存储格式进行转换,获得目标存储格式的目标数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京极豪科技有限公司,未经北京极豪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011585583.0/1.html,转载请声明来源钻瓜专利网。





