[发明专利]大数据处理方法、装置、设备及介质

说明书

本发明涉及大数据领域，提供一种大数据处理方法、装置、设备及介质，所述方法包括：实时接收到当前时刻的包含多个指令数据的疫情大数据集群；将所有指令数据区分为移动查询数据、网页查询数据和更新数据；同步执行移动查询操作、网页查询操作和数据更新操作；将相同的当前时刻的移动查询语句和网页查询语句记录为共有查询语句；通过共享网管中心判断移动查询结果以及网页查询结果是否一致；若不一致，通过共享网管中心根据更新时间进行校对并更新；通过共享网管中心，向第一客户端发送移动查询结果，同时向第二客户端发送网页查询结果；确认疫情大数据集群处理完成。本发明实现了自动校对，优化了数据库性能，提高了查询结果的准确性。

技术领域

本发明涉及大数据的数据处理领域，尤其涉及一种大数据处理方法、装置、设备及介质。

背景技术

在疫情期间，全国各地的用户无时无刻都需要关注疫情数据，用户通过各种方式实时查询或者更新当前的疫情数据，查询的方式有通过移动手机中的应用程序软件查询，也有通过访问网页查询，而且全国各地的医务人员还需要实时更新当地的疫情数据，所以同一时刻会存在对于疫情数据的大批量查询数据以及更新数据的操作，MYSQL数据库面对大批量查询数据以及更新数据的操作是十分吃力的，大大降低了MYSQL数据库的性能，往往会导致查询数据延时或者更新数据延时的情况，甚至会导致宕机，造成疫情数据未能及时提供给用户，用户就会抱怨连连，严重用户体验满意度差。

发明内容

本发明提供一种大数据处理方法、装置、计算机设备及存储介质，实现了通过利用数据库分流能够快速查询到疫情结果，并通过共享网管中心对同一时刻的来自不同客户端的查询结果进行自动校对，能够加快疫情查询速度，提高了查询结果的准确性，从而提升了用户体验满意度。

一种大数据处理方法，包括：

实时接收到当前时刻的疫情大数据集群；所述疫情大数据集群包含多个指令数据；

将所有所述指令数据区分为移动查询数据、网页查询数据和更新数据；所述移动查询数据包括移动查询语句；所述网页查询数据包括网页查询语句；

同步执行移动查询操作、网页查询操作和数据更新操作；所述移动查询操作是指在第一移动查询数据库中查询到与所述移动查询数据对应的移动查询结果；所述网页查询操作是指在第一网页查询数据库查询到与各所述网页查询数据对应的网页查询结果；所述数据更新操作是指在所述更新数据更新至MYSQL数据库之后，获得与所述更新数据对应的执行结果时，向与所述执行结果对应的客户端发送该执行结果；

将相同的所述当前时刻的所述移动查询语句和所述网页查询语句记录为共有查询语句；

通过共享网管中心判断与所述共有查询语句对应的所述移动查询结果以及所述网页查询结果是否一致；

若与所述共有查询语句对应的所述移动查询结果以及所述网页查询结果不一致，通过所述共享网管中心对与所述共有查询语句对应的所述移动查询结果以及所述网页查询结果进行校对，并根据所述校对结果更新与所述共有查询语句对应的所述移动查询结果或/和网页查询结果；

通过所述共享网管中心，向第一客户端发送所述移动查询结果，同时向第二客户端发送所述网页查询结果；

在检测到所有所述移动查询结果、所有所述网页查询结果和所有所述执行结果均发送完毕时，确认所述疫情大数据集群处理完成。

一种大数据处理装置，包括：

接收模块，用于实时接收到当前时刻的疫情大数据集群；所述疫情大数据集群包含多个指令数据；

区分模块，用于将所有所述指令数据区分为移动查询数据、网页查询数据和更新数据；所述移动查询数据包括移动查询语句；所述网页查询数据包括和网页查询语句；