[发明专利]数据处理方法、装置、设备及存储介质有效
申请号: | 201910370764.2 | 申请日: | 2019-05-06 |
公开(公告)号: | CN110263050B | 公开(公告)日: | 2023-10-27 |
发明(设计)人: | 吴磊 | 申请(专利权)人: | 创新先进技术有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/21 |
代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 许振新;朱文杰 |
地址: | 英属开曼群岛大开曼*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 设备 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
对于离线处理的目标周期的目标字段对应的数据,确定所述目标周期的上一周期的数据中是否存在所述目标字段;
若所述目标周期的上一周期的数据中不存在所述目标字段,则将所述目标周期的所述目标字段对应的数据回写至在线数据库;
若所述目标周期的上一周期的数据中存在所述目标字段,则确定在所述目标周期与所述上一周期中所述目标字段对应的数据是否相同;
若不相同,则将所述目标周期的所述目标字段对应的数据回写至所述在线数据库。
2.根据权利要求1所述的数据处理方法,其特征在于,所述数据处理方法还包括:
若确定在所述目标周期与所述上一周期中所述目标字段对应的数据相同,则增加所述目标周期的所述目标字段对应的数据的未回写周期;
判断增加后的所述目标字段对应的数据的未回写周期是否大于等于预定阈值;
若大于等于所述预定阈值,则将所述目标周期的所述目标字段对应的数据回写至所述在线数据库。
3.根据权利要求2所述的数据处理方法,其特征在于,所述数据处理方法还包括:
在将所述目标周期的所述目标字段对应的数据回写至所述在线数据库之前,将所述目标周期的所述目标字段对应的数据的未回写周期重置为零。
4.根据权利要求1所述的数据处理方法,其特征在于,所述数据处理方法还包括:
若从所述在线数据库查询预定周期的所述目标字段对应的数据,则确定在所述预定周期是否回写了所述目标字段对应的数据;
若未回写所述目标字段对应的数据,则将所述预定周期之前最近周期的已回写的所述目标字段对应的数据作为所述预定周期的所述目标字段对应的数据。
5.根据权利要求1所述的数据处理方法,其特征在于,所述数据处理方法还包括:
若从所述在线数据库查询预定时间区间的所述目标字段对应的数据,则基于查询到的周期的所述目标字段对应的数据来补齐未查询到的周期的所述目标字段对应的数据。
6.根据权利要求1所述的数据处理方法,其特征在于,确定所述目标周期的上一周期的数据中是否存在所述目标字段,包括:
判断所述目标周期的上一周期对应的数据表中是否存在所述目标字段对应的主键;
若存在所述目标字段对应的主键,则确定所述目标周期的上一周期的数据中存在所述目标字段。
7.根据权利要求1至6中任一项所述的数据处理方法,其特征在于,所述目标字段为数据表的主键。
8.一种数据处理装置,其特征在于,包括:
字段确定模块,用于对于离线处理的目标周期的目标字段对应的数据,确定所述目标周期的上一周期的数据中是否存在所述目标字段;
第一回写模块,用于若所述目标周期的上一周期的数据中不存在所述目标字段,则将所述目标周期的所述目标字段对应的数据回写至在线数据库;
数据确定模块,用于若所述目标周期的上一周期的数据中存在所述目标字段,则确定在所述目标周期与所述上一周期中所述目标字段对应的数据是否相同;
第二回写模块,用于若不相同,则将所述目标周期的所述目标字段对应的数据回写至所述在线数据库。
9.根据权利要求8所述的数据处理装置,其特征在于,所述数据处理装置还包括:
周期增加模块,用于若确定在所述目标周期与所述上一周期中所述目标字段对应的数据相同,则增加所述目标周期的所述目标字段对应的数据的未回写周期;
周期判断模块,用于判断增加后的所述目标字段对应的数据的未回写周期是否大于等于预定阈值;
第三回写模块,用于若大于等于所述预定阈值,则将所述目标周期的所述目标字段对应的数据回写至所述在线数据库。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于创新先进技术有限公司,未经创新先进技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910370764.2/1.html,转载请声明来源钻瓜专利网。