[发明专利]用于数据处理服务器的数据处理方法和装置

说明书

本申请公开了用于数据处理服务器的数据处理方法和装置。该方法的一具体实施方式包括：周期性地检测数据备份服务器中是否存在满足预定条件的目标数据；响应于检测到该目标数据，则将该目标数据存储至历史数据存储服务器；在数据存储服务器中对该目标数据执行移除操作，以使该数据存储服务器在该移除操作执行完成后，对该数据备份服务器中的该目标数据进行移除。该实施方式有效地降低了数据存储服务器的输入/输出压力。

技术领域

本申请涉及计算机技术领域，具体涉及互联网技术领域，尤其涉及用于数据处理服务器的数据处理方法和装置。

背景技术

数据归档是将不再经常使用的数据从生产库移到历史库长期保存的过程。其中，生产库可以是实际对外提供服务的数据库服务器。生产库中的数据是随着业务量动态增长的，如果不及时进行数据归档，会严重影响到生产库的性能。在互联网行业尤其是电商行业，为了保障生产库的性能，需要及时进行数据归档。由于在电商等行业生产库每日的数据增长量非常大，因此数据归档的频率远大于传统行业。

现有的数据归档方法通常是从生产库中查询出待归档数据，然后将该待归档数据插入到历史库，最后再从生产库中删除该待归档数据。但现有的方法通常给生产库的性能带来一定的影响。如何在减轻对生产库的性能的影响的基础上实现数据归档，是一个值得研究的问题。

发明内容

本申请的目的在于提出一种改进的用于数据处理服务器的数据处理方法和装置，来解决以上背景技术部分提到的技术问题。

第一方面，本申请实施例提供了一种用于数据处理服务器的数据处理方法，上述数据处理服务器分别与数据存储服务器、数据备份服务器和历史数据存储服务器通信连接，上述数据存储服务器与上述数据备份服务器通信连接，上述数据存储服务器与上述数据备份服务器存储相同的数据，该方法包括：周期性地检测上述数据备份服务器中是否存在满足预定条件的目标数据；响应于检测到上述目标数据，则将上述目标数据存储至上述历史数据存储服务器；在上述数据存储服务器中对上述目标数据执行移除操作，以使上述数据存储服务器在上述移除操作执行完成后，对上述数据备份服务器中的上述目标数据进行移除。

在一些实施例中，在上述周期性地检测上述数据备份服务器中是否存在满足预定条件的目标数据之前，上述方法还包括：对上述数据备份服务器中的数据进行排序，将排序后的数据划分成数据组集合。

在一些实施例中，上述周期性地检测上述数据备份服务器中是否存在满足预定条件的目标数据，包括：周期性地检测上述数据组集合中的数据组中是否存在满足上述预定条件的目标数据。

在一些实施例中，上述响应于检测到上述目标数据，则将上述目标数据存储至上述历史数据存储服务器，包括：对于上述数据组集合中的每一个数据组，响应于检测到该数据组中存在满足上述预定条件的目标数据，则将检测到的目标数据存储至上述历史数据存储服务器。

在一些实施例中，上述在上述数据存储服务器中对上述目标数据执行移除操作，以使上述数据存储服务器在上述移除操作执行完成后，对上述数据备份服务器中的上述目标数据进行移除，包括：对于上述数据组集合中的每一个数据组，在上述数据存储服务器中对该数据组中的满足上述预定条件的目标数据执行第一移除操作，以使上述数据存储服务器在上述第一移除操作执行完成后，对上述数据备份服务器中的、该数据组中的满足上述预定条件的目标数据进行移除。

在一些实施例中，上述数据存储服务器和上述数据备份服务器中的每条数据设置有标识，上述标识用于唯一地指示上述数据；以及上述在上述数据存储服务器中对该数据组中的满足上述预定条件的目标数据执行第一移除操作，包括：基于上述该数据组中的满足上述预定条件的目标数据的标识，在上述数据存储服务器中查找出上述该数据组中的满足上述预定条件的目标数据，并对查找出的目标数据进行移除。