[发明专利]一种数据处理方法及装置

说明书

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据处理方法及装置。

背景技术

随着网络和文化事业的发展，音视频资源极大丰富，对音视频文件的处理的需要也快速增长。

音视频文件处理的大致流程如下：首先将需处理的音视频文件解封装成为视频帧序列和音频帧序列；然后将视频帧序列和音频帧序列分别解码为RAW格式和PCM格式数据；对RAW格式和PCM格式数据进行处理；再将RAW格式和PCM格式的数据编码为所需格式的音频帧序列和视频帧序列；最后将音频帧序列和视频帧序列封装成需要的文件格式。

以上处理是通过计算机或计算机构成的数据处理装置来完成的，现有的这些计算机或数据处理装置是依靠本机的软硬件资源来实现对文件的处理。音视频文件处理的计算量庞大，对处理装置的运算能力和存储资源消耗很大，而且随着高清音视频文件的日益增多和处理需求的不断增大，依靠单机进行音视频文件处理的瓶颈问题日益突出，单机处理速度慢且容易发生系统崩溃。即使用户使用配置很高的计算机也难以保证处理的速度和稳定程度，尤其无法满足大批量和时间要求很高的处理任务。

鉴于现有技术中存在的以上问题，提供了一种分布式处理系统，使用多台计算机或处理装置来实现并行处理，并通过状态队列确定是否删除接受到的多媒体文件碎片，从而大大减少了处理所需的时间，同时降低了系统的处理压力，减少了系统崩溃的可能性。

发明内容

本发明实施例提供一种数据处理方法及装置，包括如下技术方案：

根据本发明实施例的第一方面，提供一种数据处理方法，用于分布式音视频处理系统，所述系统包括多个音视频处理装置，所述方法包括：

接收所述多个音视频处理装置发送的视频数据对应的处理后的多媒体文件碎片；

判断所述多媒体文件碎片的身份标识是否在存储的状态队列中，以得到判断结果；

根据所述判断结果确定是否删除所述多媒体文件碎片。

在一个实施例中，所述根据所述判断结果确定是否删除所述多媒体文件碎片，包括：

当所述判断结果为所述多媒体文件碎片的身份标识不在所述状态队列中时，将所述多媒体文件碎片的身份标识添加至所述状态队列中；

当所述判断结果为所述多媒体文件碎片的身份标识在所述状态队列中时，删除所述多媒体文件碎片。

在一个实施例中，所述多媒体文件碎片的名称中包括多媒体文件名称、碎片名称和/或多媒体文件类型。

在一个实施例中，在所述状态队列的存储时长达到预设存储时长时，删除所述状态队列。

根据本发明实施例的第二方面，提供一种数据处理装置，用于分布式音视频处理系统，所述系统包括多个音视频处理装置，所述方法包括：

接收模块，用于接收所述多个音视频处理装置发送的视频数据对应的处理后的多媒体文件碎片；

判断模块，用于判断所述多媒体文件碎片的身份标识是否在存储的状态队列中，以得到判断结果；

确定模块，用于根据所述判断结果确定是否删除所述多媒体文件碎片。

在一个实施例中，所述确定模块包括：

添加子模块，用于当所述判断结果为所述多媒体文件碎片的身份标识不在所述状态队列中时，将所述多媒体文件碎片的身份标识添加至所述状态队列中；

删除子模块，用于当所述判断结果为所述多媒体文件碎片的身份标识在所述状态队列中时，删除所述多媒体文件碎片。

在一个实施例中，所述多媒体文件碎片的名称中包括多媒体文件名称、碎片名称和/或多媒体文件类型。

在一个实施例中，在所述状态队列的存储时长达到预设存储时长时，删除所述状态队列。

本发明的实施例提供的技术方案可以包括以下有益效果：

上述技术方案，在接收到音视频处理装置发送的处理后的多媒体文件碎片后，判断其是否在存储的状态队列，如果不在状态队列中，则将其放入状态队列，如果在状态队列中，则将其删除，从而避免其占用多余的资源。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。

图1是根据一示例性实施例示出的数据处理方法的流程图。

图2是根据一示例性实施例示出的数据处理方法中步骤S103的流程图。

图3是根据一示例性实施例示出的数据处理装置的框图。