[发明专利]数据处理方法、分布式数据库管理系统及设备在审
申请号: | 202310609940.X | 申请日: | 2023-05-26 |
公开(公告)号: | CN116643862A | 公开(公告)日: | 2023-08-25 |
发明(设计)人: | 肖勇博;杨建学;王见广;侯金泽 | 申请(专利权)人: | 中国银行股份有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/54;G06F11/30;G06F16/25;G06F16/27 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 王征;刘芳 |
地址: | 100818 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 分布式 数据库 管理 系统 设备 | ||
本申请提供一种数据处理方法、分布式数据库管理系统及设备,可用于分布式数据库领域。上述分布式数据库管理系统包括任务管理模块、执行模块、传输模块以及多个数据库,执行模块包括多个执行单元;方法包括:任务管理模块收集分布式数据库管理系统中生成的多个数据卸载任务,并分发至执行模块中的至少一个目标执行单元;目标执行单元执行接收到的数据卸载任务;其中,当目标执行单元接收到多个数据卸载任务时,并行执行多个数据卸载任务;传输模块监听每个数据卸载任务的状态,将处于完成状态的数据卸载任务对应的卸载文件传输至预设存储区。本申请可以有效提升分布式数据库架构下的数据卸载效率,更好的满足分布式数据库架构下的数据卸载需求。
技术领域
本申请涉及分布式数据库领域,尤其涉及一种数据处理方法、分布式数据库管理系统及设备。
背景技术
随着银行业务的快速发展,传统数据库已无法满足银行业务发展需求。银行在新一代系统建设过程中,逐步引入了分布式数据库架构。
基于分布式数据库架构的应用系统的特点在于分库分表机制,它虽然提高了数据库的可扩展性,但是也带来了数据碎片化的问题。相较于集中式数据库的数据存储在单一节点中,分布式数据库架构下每个逻辑表的数据会被存放到不同节点中,由此使数据卸载的任务量越来越高。
传统的按节点手工逐一卸载数据的方式操作复杂,且耗时较长,已经无法满足分布式数据库架构下的数据卸载需求。
发明内容
本申请提供一种数据处理方法、分布式数据库管理系统及设备,可以解决现有技术中的数据卸载方式已经无法满足分布式数据库架构下的数据卸载需求的技术问题。
第一方面,本申请提供一种数据处理方法,应用于分布式数据库管理系统,所述分布式数据库管理系统包括任务管理模块、执行模块、传输模块以及多个数据库,所述执行模块包括多个执行单元;所述方法包括:
所述任务管理模块收集所述分布式数据库管理系统中生成的多个数据卸载任务,并将收集到的所述多个数据卸载任务分发至所述执行模块中的至少一个目标执行单元;其中,所述数据卸载任务用于卸载所述数据库中的数据;
所述目标执行单元执行接收到的所述数据卸载任务;其中,当所述目标执行单元接收到多个所述数据卸载任务时,所述目标执行单元并行执行多个所述数据卸载任务;
所述传输模块监听每个所述数据卸载任务的状态,当监听到处于完成状态的数据卸载任务时,将处于完成状态的所述数据卸载任务对应的卸载文件传输至预设存储区。
第二方面,本申请提供一种分布式数据库管理系统,所述分布式数据库管理系统包括任务管理模块、执行模块、传输模块以及多个数据库,所述执行模块中包括多个执行单元;
所述任务管理模块用于收集所述分布式数据库管理系统中生成的多个数据卸载任务,并将收集到的所述多个数据卸载任务分发至所述执行模块中的至少一个目标执行单元;其中,所述数据卸载任务用于卸载所述数据库中的数据;
所述目标执行单元用于执行接收到的所述数据卸载任务;其中,当所述目标执行单元接收到多个所述数据卸载任务时,所述目标执行单元并行执行多个所述数据卸载任务;
所述传输模块用于监听每个所述数据卸载任务的状态,当监听到处于完成状态的数据卸载任务时,将处于完成状态的所述数据卸载任务对应的卸载文件传输至预设存储区。
第三方面,本申请提供一种电子设备,包括:处理器,以及与所述处理器通信连接的存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,以实现如第一方面提供的数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银行股份有限公司,未经中国银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310609940.X/2.html,转载请声明来源钻瓜专利网。