[发明专利]数据归档方法、装置、设备及存储介质

说明书

本发明涉及数据库技术领域，公开了一种数据归档方法、装置、设备及存储介质。所述数据归档方法包括：连接源服务器，并在所述源服务器中定义源数据库以及所述源数据库下的源数据表；连接目标服务器，并在所述目标服务器下定义目标数据库以及所述目标数据库下的目标数据表；对所述源数据表进行初始化，按照分区规则将所述源数据表转换为多个分区表，同时将所述源数据表的索引转换为分区表字段索引；其中，所述分区规则根据添加的不同的分区值所生成。本发明实现大表分区数据快速迁移和归档，为生产数据库及数据表进行减负，避免因表数据不断增长而带来的系统性能瓶颈问题。

技术领域

本发明涉及数据库技术领域，尤其涉及一种数据归档方法、装置、设备及存储介质。

背景技术

随着数据库技术的发展，越来越多的数据库被应用在各行各业，特别是电商行业、金融行业、医疗服务行业等，每天都会产生大量的业务数据需要存储至数据库中的不同业务数据表中，且随着新增业务数据的不断注入，数据表的空间占用越来越大，数据表访问的性能也会出现瓶颈，如何缩减数据库空间占用，提高访问性能成为亟待解决的问题。

将数据表进行分区划分实现数据的分区存储，能够有效的对数据进行归档、对存储空间进行释放，从而解决上述问题，但是现有的实现数据表分区方法的软件工具需要一个时间不短的初始化的过程，它需要在客户系统第一次使用时，需要半天到一天左右的准备及初始化，在数据分区过程中因服务器资源被长时间占用会带来数据库被锁定，客户系统存在停机的风险。

发明内容

本发明提供了一种数据归档方法、装置、设备及存储介质，用于解决上述提到的技术问题。

本发明第一方面提供了一种数据归档方法，所述数据归档方法包括：

连接源服务器，并在所述源服务器中定义源数据库以及所述源数据库下的源数据表；连接目标服务器，并在所述目标服务器下定义目标数据库以及所述目标数据库下的目标数据表；对所述源数据表进行初始化，按照分区规则将所述源数据表转换为多个分区表，同时将所述源数据表的索引转换为分区表字段索引；其中，所述分区规则根据添加的不同的分区值所生成；通过客户端开始执行数据归档操作，将所述分区表中的分区数据转移到所述源数据库中临时的中间表中；通过调用MS-SQL数据库的SQL指令，结合MS-SQL数据库的BCP特性，导出所述中间表中的数据并导入所述目标数据表中，并移除所述源数据库中的所述中间表。

可选的，在本发明第一方面的第一种实现方式中，通过所述客户端开始执行数据归档操作，将所述分区表中的分区数据转移到源数据库中临时的中间表中，具体包括：

所述客户端接收数据归档操作请求，所述数据归档操作请求中包含其所请求归档操作的数据对应的关键字和分区表的表名；

所述客户端对所述数据归档操作请求进行解析，获得所述表名；

所述客户端根据所述表名，对所述数据归档操作请求进行参数化处理，获得所述关键字；

所述客户端根据所述表名和所述关键字，获取与所述数据归档操作请求和所述分区表对应的分区规则；

所述客户端根据所述分区规则和所述数据归档操作请求，将所述分区表中的分区数据转移到所述源数据库中临时的中间表中。

可选的，在本发明第一方面的第二种实现方式中，所述客户端根据所述分区规则和所述数据归档操作请求，将所述分区表中的分区数据转移到所述源数据库中临时的中间表中，包括：

所述客户端根据所述分区规则以及所述关键字，确定所述数据归档操作请求所请求操作的数据所处分区的分区物理标记；

根据所述分区物理标记，在保存的分区物理位置信息中确定所述分区物理标记对应的分区物理位置信息；

根据所述分区物理标记对应的分区物理位置信息，确定所述源数据库中临时的中间表地址，并将所述数据发送给所述中间表。