[发明专利]数据处理方法、装置、电子设备及存储介质

说明书

本申请公开了一种数据处理方法、装置及电子设备，该方法包括：从缓存队列中，获取待处理的聚合消息，其中，所述聚合消息包括目标对象的目标标识和任务类别，所述任务类别表示对所述目标对象执行的任务处理事项的类别；根据所述目标标识和所述任务类别，对所述目标对象执行所述任务处理事项，获得处理结果；以及，根据预设的存储规则存储所述处理结果。该方法可以降低系统内的数据处理量，从而减轻数据库压力，提升数据的读取和写入速度。

技术领域

本公开涉及互联网数据处理技术领域，更具体地，涉及一种数据处理方法、装置、电子设备及计算机可读存储介质，本公开同时还涉及一种数据获取方法。

背景技术

在互联网领域，用户通过终端设备可以发布丰富多样的对象，该对象例如可以为视频、文字及图像等；在终端设备将用户待发布的对象发送给服务器之后，服务器可以通过对对象进行聚合处理，将对象聚合到同一类别下；这样，当其他用户使用终端设备浏览对象时，服务器可以将用户感兴趣的类别下的对象展示给用户查看，以提升用户黏性。

在实现本申请的过程中，发明人发现，现有方法在进行聚合处理时，往往是在成功发布对象之后，同时对对象进行聚合处理，并将得到的聚合数据同步写入数据库，例如，mysql数据库中；然而，在用户活跃高峰时段，例如，晚间或节假日，由于对象的发布量急剧增加，因此，对应的聚合处理也将随之增加，而现有的在对象发布成功后，同步向数据库写入聚合数据的方式将会导致数据库的数据请求量在高峰时段突增，给数据库造成较大压力，并且，由于数据库一般会按照最大数据请求量进行部署，因此，这还可存在非高峰时段数据库资源浪费的问题。

以上，是以对象发布成功后，针对该对象的聚合处理为例，说明现有方法所存在的问题；在实际中，在对象发布成功之后，在需要更新对象的相关信息时，现有方法同样存在上述问题，因此，有必要提供一种数据处理方法，以根据业务特性对数据进行聚合处理，避免可能带来的数据库压力过高以及资源浪费的问题。

发明内容

本公开实施例提供了一种数据处理方法、装置、电子设备及存储介质，以及一种数据获取方法，使得电子设备在进行数据聚合处理时，可以根据业务特性对数据进行聚合以及存储，以高效的利用数据库，提升数据写入和读取速度。

本公开的第一方面，提供了一种数据处理方法，该方法包括：

从缓存队列中，获取待处理的聚合消息，其中，所述聚合消息包括目标对象的目标标识和任务类别，其中，所述任务类别表示对所述目标对象执行的任务处理事项的类别；

根据所述目标标识和所述任务类别，对所述目标对象执行所述任务处理事项，获得处理结果；以及，

根据预设的存储规则存储所述处理结果。

本公开的第二方面，还提供了一种数据获取方法，包括：

接收终端设备发送的对象获取请求，其中，所述对象获取请求包括所述待获取的目标对象的目标标识，所述目标对象与目标话题关联；

在根据所述目标标识和所述目标话题的话题标识，判定所述目标对象未存储在第三数据库的情况下，根据所述目标标识和所述话题标识，从第二数据库获取所述目标对象，其中，所述第二数据库为将数据存储在非易失性存储器中的非关系型数据库，所述第三数据库为将数据存储在易失性存储器中的非关系型数据库；

将所述目标对象提供给所述终端设备。

本公开的第三方面，还提供了一种数据处理装置，包括：

聚合消息获取模块，用于从缓存队列中，获取待处理的聚合消息，其中，所述聚合消息包括目标对象的目标标识和任务类别，所述任务类别表示对所述目标对象执行的任务处理事项的类别；

处理结果获得模块，用于根据所述目标标识和所述任务类别，对所述目标对象执行所述任务处理事项，获得处理结果；以及，