[发明专利]物料数据的处理方法、装置、设备及存储介质

说明书

本申请提供一种物料数据的处理方法、装置、设备及存储介质，该方法包括：获取待处理物料数据及所述待处理物料数据所属的类型，所述类型包括增量数据类型和全量数据类型；根据所述待处理物料数据所属的类型，将所述待处理物料数据加入到对应的消息队列，以使流水系统从所述消息队列获取所述待处理物料数据并根据所述待处理物料数据生成正排文件，其中，不同的类型对应不同的消息队列。将增量数据和全量数据解耦合处理，提高处理效率，并且通过双消息队列，流水系统无需读取投放系统的投放物料库，减少正排文件生成的中间过程，降低对系统资源的消耗。并且通过解析操作日志生成待处理物料数据，提高数据的安全性。

技术领域

本申请涉及计算机技术领域，尤其涉及一种物料数据的处理方法、装置、设备及存储介质。

背景技术

随着互联网技术的飞速发展，广告技术也不断提高，成为产品等宣传不可缺少的一种方式。

在广告平台中，投放系统接收用户的待投放数据，生成单元信息存储到投放系统的投放物料库，并将单元ID持久化到数据库中，流水系统执行全量时，需要从数据库读取单元ID后，根据单元ID读取投放系统的投放物料库，获得单元ID对应的待处理物料数据，并读取第三方数据源，将待处理物料数据和第三方数据组装完整的物料信息写入物料的正排文件中。

现有的物料数据处理过程，增量和全量处理业务耦合，处理效率较低。

发明内容

本申请提供一种物料数据的处理方法、装置、设备及存储介质，以解决现有技术业务耦合处理效率低等缺陷。

本申请第一个方面提供一种物料数据的处理方法，包括：

获取待处理物料数据及所述待处理物料数据所属的类型，所述类型包括增量数据类型和全量数据类型；

根据所述待处理物料数据所属的类型，将所述待处理物料数据加入到对应的消息队列，以使流水系统从所述消息队列获取所述待处理物料数据并根据所述待处理物料数据生成正排文件，其中，不同的类型对应不同的消息队列。

本申请第二个方面提供一种物料数据的处理方法，包括：

从消息队列获取待处理物料数据；

根据所述待处理物料数据调用第三方服务获取第三方数据，所述待处理物料数据包括所述第三方数据的标识；

根据所述待处理物料数据和所述第三方数据组装完整的物料信息；

根据所述完整的物料信息，生成正排文件。

本申请第三个方面提供一种物料数据的处理装置，包括：

第一获取模块，用于获取待处理物料数据及所述待处理物料数据所属的类型，所述类型包括增量数据类型和全量数据类型；

处理模块，用于根据所述待处理物料数据所属的类型，将所述待处理物料数据加入到对应的消息队列，以使流水系统从所述消息队列获取所述待处理物料数据并根据所述待处理物料数据生成正排文件，其中，不同的类型对应不同的消息队列。

本申请第四个方面提供一种物料数据的处理装置，包括：

第二获取模块，用于从消息队列获取待处理物料数据；

调用模块，用于根据所述待处理物料数据调用第三方服务获取第三方数据，所述待处理物料数据包括所述第三方数据的标识；

组装模块，用于根据所述待处理物料数据和所述第三方数据组装完整的物料信息；

生成模块，用于根据所述完整的物料信息，生成正排文件。

本申请第五个方面提供一种计算机设备，包括：至少一个处理器和存储器；