[发明专利]一种数据处理方法、处理系统及计算机装置

说明书

本发明提出了一种数据处理方法、处理系统、计算机装置及计算机可读存储介质，数据处理方法包括：接收第一数据；将第一数据存储至第一数据库及第二数据库中，并对第二数据库中的第一数据进行格式转化，转化为第二数据；将第二数据存储至消息队列；接收读取指令；根据读取指令，允许读取用户在消息队列中读取第二数据。本发明是将存储在第二数据库中的数据进行处理，因此完全不会影响主数据库中的业务，能够保证不占用业务研发人员紧张的时间参与数据产出，同时又保证了运营人员对营销数据的方便使用，使得业务顺利推进，从而提高业务效率。

技术领域

本发明涉及数据处理技术领域，具体而言，涉及一种数据处理方法、处理系统、计算机装置及计算机可读存储介质。

背景技术

场景热营销是基于大数据的策略算法，通过场景热营销能够获得如何在特定场景中给特定的人群发送特定的产品以及特定的定价。如果企业能够把场景热营销业务做好是在当今大数据时代下的一把非常好的利器。如何去寻找和挖掘这些特定的场景，就需要业务技术研发人员配合生产数据，但是由于业务技术研发人员的主要工作就是保证产品主流程的研发以及功能的正确性，根本没有时间来配合生产数据。因此，如何确保不占用业务技术研发人员时间的同时又保证运营人员对研发数据的正常使用成为亟待解决的问题。

发明内容

本发明旨在至少解决现有技术或相关技术中存在的技术问题之一。

为此，本发明的一个目的在于提出了一种数据处理方法。

本发明的另一个目的在于提出了一种数据处理系统。

本发明的再一个目的在于提出了一种计算机装置。

本发明的又一个目的在于提出了一种计算机可读存储介质。

有鉴于此，根据本发明的一个目的，提出了一种数据处理方法，包括：接收第一数据；将第一数据存储至第一数据库及第二数据库中，并对第二数据库中的第一数据进行格式转化，转化为第二数据；将第二数据存储至消息队列；接收读取指令；根据读取指令，允许读取用户在消息队列中读取第二数据。

本发明提供的数据处理方法，接收业务研发人员进行研发所产生的大量的第一数据，并将第一数据分别存储至多个第一数据库及多个第二数据库中。其中，第一数据库为主数据库，第二数据库为从数据库，第一数据库与第二数据库是同步的，将多个第二数据库中的第一数据格式转化为第二数据，同时将第二数据存储至消息队列中，消息队列为用于缓存数据的队列，当接收到运营人员的对第二数据的读取指令时，通过消息队列将第二数据提供给运营策略人员。本发明是将存储在第二数据库中的数据进行处理，因此完全不会影响主数据库中的业务，能够保证不占用业务研发人员紧张的时间参与数据产出，同时又保证了运营人员对营销数据的方便使用，使得业务顺利推进，从而提高业务效率。其中，第二数据为binlog形式的数据，binlog为二进制日志，记录对数据发生或潜在发生更改的SQL语句，并以二进制的形式保存。

根据本发明的上述数据处理方法，还可以具有以下技术特征：

在上述技术方案中，优选地，将第二数据存储至消息队列的步骤，具体包括：解析第二数据；将解析后的第二数据存储至消息队列。

在该技术方案中，在将第一数据转化为第二数据以后，对第二数据进行协议解析，补充一些特定信息，其中特定信息包括字段名字、字段类型等，再将解析后的第二数据存储至消息队列中，以供运营人员在使用第二数据时进行读取，并且也减少对数据库的依赖以及减轻了数据库的压力。

在上述任一技术方案中，优选地，读取指令中包括读取用户的身份信息；根据读取指令，允许读取用户在消息队列中读取第二数据的步骤，具体包括：验证读取用户的身份信息；读取用户的身份信息验证通过后，根据读取指令，允许读取用户在消息队列中读取第二数据。