[发明专利]一种数据回溯方法、装置、电子设备及存储介质在审
申请号: | 202210299742.3 | 申请日: | 2022-03-22 |
公开(公告)号: | CN114691658A | 公开(公告)日: | 2022-07-01 |
发明(设计)人: | 叶玮彬;崔金涛;刘涛 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/21;G06F16/28 |
代理公司: | 北京博浩百睿知识产权代理有限责任公司 11134 | 代理人: | 丰佩印 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 回溯 方法 装置 电子设备 存储 介质 | ||
1.一种数据回溯方法,包括:
基于待回溯数据的第一依赖关系和第二依赖关系,生成目标拓扑关系,其中,所述待回溯数据包括:多个数据对象,所述多个数据对象中的每个数据对象包括:多个数据单元,所述第一依赖关系用于描述不同数据对象的数据单元之间的依赖关系,所述第二依赖关系用于描述不同数据对象之间的基准时间依赖关系,所述目标拓扑关系用于确定多个待计算的任务实例;
按照预设并发度为所述多个待计算的任务实例中的每个任务实例协调对应的计算环境;
调用所述计算环境对应的计算引擎对所述计算环境对应的任务实例进行任务计算,得到计算结果,其中,所述计算结果用于调节数据回溯过程的处理进度。
2.根据权利要求1所述的数据回溯方法,其中,所述数据回溯方法还包括:
以不同数据对象的数据单元的元信息构建顶点,以不同数据对象的数据单元之间的依赖关系构建边,得到所述第一依赖关系。
3.根据权利要求1所述的数据回溯方法,其中,所述数据回溯方法还包括:
利用不同数据对象之间的基准时间偏移量和依赖时间的步长跨度,得到所述第二依赖关系。
4.根据权利要求1所述的数据回溯方法,其中,基于所述待回溯数据的所述第一依赖关系和所述第二依赖关系,生成所述目标拓扑关系包括:
对所述待回溯数据中与所述第一依赖关系关联的每个数据单元进行遍历,得到第一遍历结果;
基于所述第一遍历结果对遍历的数据单元所涉及边的出度进行标记,以及对遍历的数据单元所指向的数据对象进行标记,得到标记结果;
利用所述第二依赖关系确定基准时间的数量;
通过所述基准时间的数量和所述标记结果,将所述出度转化为同等数据的顶点,得到转化结果;
依据所述转化结果与预设关联关系生成所述目标拓扑关系,其中,所述预设关联关系用于描述所述多个数据对象与多个任务实例之间的关联关系。
5.根据权利要求1所述的数据回溯方法,其中,按照所述预设并发度为所述多个待计算的任务实例中的每个任务实例协调对应的计算环境包括:
对所述目标拓扑关系进行遍历,得到第二遍历结果;
依据所述第二遍历结果填充执行队列所包含的元素信息,得到填充结果,其中,所述执行队列用于对所述目标拓扑关系进行时序控制;
按照所述预设并发度和所述填充结果为所述多个待计算的任务实例中的每个任务实例协调对应的计算环境。
6.根据权利要求5所述的数据回溯方法,其中,所述数据回溯方法还包括:
配置容错模式,其中,所述容错模式用于在对所述多个待计算的任务实例进行任务计算过程中,响应于部分任务实例出现计算异常,确定针对计算异常的容错处理方式。
7.根据权利要求6所述的数据回溯方法,其中,调用所述计算环境对应的计算引擎对所述计算环境对应的任务实例进行任务计算,得到所述计算结果包括:
获取目标参数信息,其中,所述目标参数信息包括:所述预设并发度、所述容错模式;
基于所述目标参数信息,调用所述计算环境对应的计算引擎对所述计算环境对应的任务实例进行任务计算,得到所述计算结果。
8.根据权利要求7所述的数据回溯方法,其中,所述数据回溯方法还包括:
检测所述计算环境对应的任务实例的任务状态是否正常,以及所述计算结果是否符合预设条件;
响应于所述计算环境对应的任务实例的任务状态正常并且所述计算结果符合所述预设条件,回传所述计算结果。
9.根据权利要求7所述的数据回溯方法,其中,所述数据回溯方法还包括:
在对所述多个待计算的任务实例进行任务计算过程中,响应于部分任务实例出现计算异常,上报异常信息,其中,所述异常信息用于确定是否触发所述容错模式。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210299742.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种钻孔地下水位实时监测装置
- 下一篇:一种盖板硬质涂层镀膜工艺方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置