[发明专利]数据处理方法、分布式数据库管理系统及设备在审
申请号: | 202310609940.X | 申请日: | 2023-05-26 |
公开(公告)号: | CN116643862A | 公开(公告)日: | 2023-08-25 |
发明(设计)人: | 肖勇博;杨建学;王见广;侯金泽 | 申请(专利权)人: | 中国银行股份有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/54;G06F11/30;G06F16/25;G06F16/27 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 王征;刘芳 |
地址: | 100818 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 分布式 数据库 管理 系统 设备 | ||
1.一种数据处理方法,其特征在于,应用于分布式数据库管理系统,所述分布式数据库管理系统包括任务管理模块、执行模块、传输模块以及多个数据库,所述执行模块包括多个执行单元;所述方法包括:
所述任务管理模块收集所述分布式数据库管理系统中生成的多个数据卸载任务,并将收集到的所述多个数据卸载任务分发至所述执行模块中的至少一个目标执行单元;其中,所述数据卸载任务用于卸载所述数据库中的数据;
所述目标执行单元执行接收到的所述数据卸载任务;其中,当所述目标执行单元接收到多个所述数据卸载任务时,所述目标执行单元并行执行多个所述数据卸载任务;
所述传输模块监听每个所述数据卸载任务的状态,当监听到处于完成状态的数据卸载任务时,将处于完成状态的所述数据卸载任务对应的卸载文件传输至预设存储区。
2.根据权利要求1所述的方法,其特征在于,所述任务管理模块包括任务收集应用程序编程接口API、任务调度API以及任务状态更新API;
所述任务管理模块收集所述分布式数据库管理系统中生成的多个数据卸载任务,并将收集到的所述多个数据卸载任务分发至所述执行模块中的至少一个目标执行单元,包括:
所述任务收集API收集所述分布式数据库管理系统中生成的多个数据卸载任务;
所述任务调度API获取所述任务收集API收集到的多个数据卸载任务,并将获取到的所述多个数据卸载任务分发至所述执行模块中的至少一个目标执行单元;
所述任务状态更新API更新所述多个数据卸载任务的状态。
3.根据权利要求1所述的方法,其特征在于,当所述目标执行单元接收到多个所述数据卸载任务时,所述目标执行单元并行执行多个所述数据卸载任务,包括:
所述目标执行单元中的第一并发进程生成接收到的每个所述数据卸载任务所需的数据卸载参数;
基于所述数据卸载参数,所述目标执行单元中的第二并发进程执行接收到的多个所述数据卸载任务。
4.根据权利要求1至3任一项所述的方法,其特征在于,所述分布式数据库管理系统中还包括监听数据库;所述方法还包括:
利用所述监听数据库分别监听所述任务管理模块、所述执行模块及所述传输模块中的所述数据卸载任务的状态,并根据监听结果实时更新所述数据卸载任务的状态。
5.根据权利要求4所述的方法,其特征在于,所述传输模块包括监听API、压缩API以及传输API;
所述传输模块监听每个所述数据卸载任务的状态,当监听到处于完成状态的数据卸载任务时,将处于完成状态的所述数据卸载任务对应的卸载文件传输至预设存储区,包括:
所述监听API获取所述监听数据库中每个所述数据卸载任务的状态,当所述监听数据库中存在处于完成状态的第一数据卸载任务时,检测预设文件生成位置是否生成所述第一数据卸载任务对应的卸载文件;
当检测到所述预设文件生成位置生成所述第一数据卸载任务对应的卸载文件时,调用所述压缩API对所述第一数据卸载任务对应的卸载文件进行压缩处理;
所述传输API将压缩处理后的所述卸载文件传输至所述预设存储区。
6.一种分布式数据库管理系统,其特征在于,所述分布式数据库管理系统包括任务管理模块、执行模块、传输模块以及多个数据库,所述执行模块中包括多个执行单元;
所述任务管理模块用于收集所述分布式数据库管理系统中生成的多个数据卸载任务,并将收集到的所述多个数据卸载任务分发至所述执行模块中的至少一个目标执行单元;其中,所述数据卸载任务用于卸载所述数据库中的数据;
所述目标执行单元用于执行接收到的所述数据卸载任务;其中,当所述目标执行单元接收到多个所述数据卸载任务时,所述目标执行单元并行执行多个所述数据卸载任务;
所述传输模块用于监听每个所述数据卸载任务的状态,当监听到处于完成状态的数据卸载任务时,将处于完成状态的所述数据卸载任务对应的卸载文件传输至预设存储区。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银行股份有限公司,未经中国银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310609940.X/1.html,转载请声明来源钻瓜专利网。