[发明专利]数据服务方法及装置

说明书

本发明提供了一种数据服务方法及装置，可用于大数据领域，该方法包括：获取目标对象的数据需求；从kafka中读取满足数据需求的流式数据；按照数据需求，对所述流式数据中进行处理；将处理后的流式数据通过websocket的方式推送到前端；从数据库中查询满足数据需求的离线数据，并缓存到前端；在前端对处理后的流式数据和查询到的离线数据进行整合，获得整合后的数据；将整合后的数据在前端进行展示。本发明可以实时向前端提供数据服务，效率高。

技术领域

本发明涉及大数据领域，尤其涉及一种数据服务方法及装置。

背景技术

传统的数据服务方式是从数据库中查询，然后通过前端页面展示出来，但是查询时可能有部分数据还未来得及存入数据库中，页面展示的结果不包含最新的数据，不满足需要在前端实时展示数据变化情况的需求。另一方面，流式处理之后的数据量很大，并且数据质量不能满足前端直接使用，在传输到前端之前还要根据需要进行进一步预处理，减少数据量，筛选出前端需要的少量数据，并且流式数据未按时间顺序排序，展示时稳定性和准确性不如查询离线数据。因此，目前需要一种能够实时向前端提供数据的服务。

发明内容

本发明实施例提出一种数据服务方法，用以实时向前端提供数据服务，效率高，该方法包括：

获取目标对象的数据需求；

从kafka中读取满足数据需求的流式数据；

按照数据需求，对所述流式数据中进行处理；

将处理后的流式数据通过websocket的方式推送到前端；

从数据库中查询满足数据需求的离线数据，并缓存到前端；

在前端对处理后的流式数据和查询到的离线数据进行整合，获得整合后的数据；

将整合后的数据在前端进行展示。

本发明实施例提出一种数据服务装置，用以实时向前端提供数据服务，效率高，该装置包括：

数据需求获取模块，用于获取目标对象的数据需求；

流式数据读取模块，用于从kafka中读取满足数据需求的流式数据；

数据处理模块，用于按照数据需求，对所述流式数据中进行处理；

数据推送模块，用于将处理后的流式数据通过websocket的方式推送到前端；

数据查询模块，用于从数据库中查询满足数据需求的离线数据，并缓存到前端；

整合模块，用于在前端对处理后的流式数据和查询到的离线数据进行整合，获得整合后的数据；

展示模块，用于将整合后的数据在前端进行展示。

本发明实施例还提出了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述数据服务方法。

本发明实施例还提出了一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述数据服务方法的计算机程序。

在本发明实施例中，获取目标对象的数据需求；从kafka中读取满足数据需求的流式数据；按照数据需求，对所述流式数据中进行处理；将处理后的流式数据通过websocket的方式推送到前端；从数据库中查询满足数据需求的离线数据，并缓存到前端；在前端对处理后的流式数据和查询到的离线数据进行整合，获得整合后的数据；将整合后的数据在前端进行展示。在上述过程中，在前端展示之前，对流式数据进行了处理，减少了数据流，使推送更加高效准确。提高了整体效率。同时通过查询离线数据，满足实时性要求的同时也满足了查看数据库中离线数据的需要。

附图说明