[发明专利]一种数据处理方法、装置和管理节点

说明书

本申请提供一种数据处理方法、装置和管理节点。本申请提供的数据处理方法，包括：接收各个存储节点上报的资源池信息，所述资源池信息至少包括：目标数据覆盖时间点和目标录制时间点，在确定数据覆盖条件达到时，针对每一存储节点，依据该存储节点上报的目标数据覆盖时间点和所有存储节点上报的目标录制时间点判断该存储节点在之前是否正常执行覆盖任务；如果否，依据该存储节点上报的目标数据覆盖时间点，为该存储节点确定待执行覆盖任务的第一数据覆盖时间点，并将所述第一数据覆盖时间点携带在覆盖任务中下发给该存储节点。本申请提供的数据处理方法、装置和管理节点，可在故障的存储节点恢复正常后，平滑的删除该存储节点存储的视频数据。

技术领域

本申请涉及云存储技术领域，尤其涉及一种数据处理方法、装置和管理节点。

背景技术

近年来，随着云存储技术的发展，云存储系统均支持循环覆盖，以删除云存储系统中的历史数据，保证存储空间的重复利用。

相关技术提出了一种数据处理方法，在该方法中，管理节点以最近一次下发覆盖任务时该覆盖任务携带的数据覆盖时间点和指定时间点中时间较晚的时间点为基准时间点确定待执行覆盖任务的目标数据覆盖时间点，并向各个存储节点下发携带该目标数据覆盖时间点的覆盖任务，以指示存储节点将录制时间点处于该目标数据覆盖时间点之前的视频数据删除。其中，指定时间点为各个存储节点上报的最早的视频数据的录制时间点中时间最早的录制时间点。

然而，由于各种原因，存储节点会故障。这样，当故障的存储节点恢复正常后，由于该存储节点因故障长时间未执行覆盖任务，该存储节点对应的最早的视频数据的录制时间点远远早于依据上述方法确定出的覆盖时间点。这样，该存储节点执行本次覆盖任务后，将导致该存储节点上的视频数据被一次性大量删除。这样，将导致用户没有足够的时间利用该存储节点上的视频数据，造成数据资源的浪费。

发明内容

有鉴于此，本申请提供一种数据处理方法、装置和管理节点，以在故障的存储节点恢复正常后，平滑的删除该存储节点存储的视频数据，以给用户预留足够的时间利用该存储节点存储的视频数据。

本申请第一方面提供一种数据处理方法，所述方法应用于云存储系统中的管理节点，所述方法包括：

接收各个存储节点上报的资源池信息，所述资源池信息至少包括：目标数据覆盖时间点和目标录制时间点，所述目标数据覆盖时间点为最近的数据覆盖时间点，所述目标录制时间点为最早的视频数据录制时间点；

在确定数据覆盖条件达到时，针对每一存储节点，依据该存储节点上报的目标数据覆盖时间点和所有存储节点上报的目标录制时间点判断该存储节点在之前是否正常执行覆盖任务；

若否，依据该存储节点上报的目标数据覆盖时间点，为该存储节点确定待执行覆盖任务的第一数据覆盖时间点，并将所述第一数据覆盖时间点携带在覆盖任务中下发给该存储节点。

本申请第二方面提供一种数据处理装置，所述装置应用于云存储系统中的管理节点，所述装置包括接收模块、判断模块和处理模块，其中，

所述接收模块，用于接收各个存储节点上报的资源池信息，所述资源池信息至少包括：目标数据覆盖时间点和目标录制时间点，所述目标数据覆盖时间点为最近的数据覆盖时间点，所述目标录制时间点为最早的视频数据录制时间点；

所述判断模块，用于在确定数据覆盖条件达到时，针对每一存储节点，依据该存储节点上报的目标数据覆盖时间点和所有存储节点上报的目标录制时间点判断该存储节点在之前是否正常执行覆盖任务；

所述处理模块，用于在所述判断模块判断该存储节点在之前未正常执行覆盖任务时，依据该存储节点上报的目标数据覆盖时间点，为该存储节点确定待执行覆盖任务的第一数据覆盖时间点，并将所述第一数据覆盖时间点携带在覆盖任务中下发给该存储节点。