[发明专利]一种集群数据存储方法、装置、电子设备及存储介质

说明书

本申请提供了一种集群数据存储方法、装置、电子设备及存储介质，获取数据存储请求，数据存储请求包括待存储数据和待存储数据对应的存储数据库信息；响应于数据存储请求根据存储数据库信息确定目标存储集群；确定目标存储集群对应于消息队列中的目标消息主题，在目标消息主题中存储包含数据存储请求的目标消息；从目标消息主题中消费目标消息，将目标消息中的待存储数据存储至目标存储集群的所有集群存储节点中。能够先将待存储数据存储至消息队列中，再通过消费消息的方式对待存储数据进行存储，避免了待存储数据在存储过程中丢失的问题，并且能够将待存储数据存储至存储集群的多个集群存储节点中，进一步提升了数据存储的安全性。

技术领域

本申请实施例涉及集群数据存储技术领域，尤其涉及一种集群数据存储方法、装置、电子设备及计算机可读存储介质。

背景技术

伴随着数据存储技术的发展，越来越多的公司开始提供数据存储解决方案的相关服务，这些方案中，有些能够支持集群存储，而有些受限于具体的应用场景，只能支持单机使用，并不能支持集群存储(例如单机版的InfluxDB)。

相关技术中，为了使不能支持集群存储的存储解决方案能够应用在集群存储业务中，通常会设置代理服务器，通过代理服务器连接多个由单机版的数据存储解决方案构建的存储节点，再通过代理服务器为这些存储节点分配存储任务，将不同的数据存储至不同的存储节点中，从而使单机版的数据存储解决方案能实现集群存储效果。

但是，由于集群存储的实现需要在系统中增加代理服务器，在进行数据存储时容易造成数据泄露，从而导致实现集群存储的方案在进行数据存储时的安全性较低。

发明内容

本申请实施例提供一种集群数据存储方法、装置、电子设备及计算机可读存储介质，以解决相关技术中实现集群存储的方案安全性较低的问题。

第一方面，本申请实施例提供了一种集群数据存储方法，该方法包括：

获取数据存储请求，所述数据存储请求包括待存储数据和所述待存储数据对应的存储数据库信息；

响应于所述数据存储请求，根据所述存储数据库信息确定目标存储集群；其中，所述目标存储集群包含多个集群存储节点；

确定所述目标存储集群对应于消息队列中的目标消息主题，在所述目标消息主题中存储包含所述数据存储请求的目标消息；

从所述目标消息主题中消费所述目标消息，将所述目标消息中的待存储数据存储至所述目标存储集群的所有集群存储节点中。

在一种可选实施方式中，所述根据所述存储数据库信息确定目标存储集群，包括：

从数据库配置服务器获取数据库配置信息；其中，所述数据库配置信息包含数据库与存储集群之间的对应关系，以及存储集群与消息队列中数据消息主题之间的对应关系；

基于所述数据库配置信息，查询所述存储数据库信息对应的目标存储集群；

所述确定所述目标存储集群对应于消息队列中的目标消息主题，包括：

基于所述数据库配置信息，查询所述目标存储集群在所述消息队列中对应的目标消息主题。

在一种可选实施方式中，所述目标消息主题包含多个消费组，所述消费组与所述集群存储节点具有一一对应关系，所述在所述目标消息主题中存储包含所述数据存储请求的目标消息，包括：

基于所述数据存储请求生成目标消息，将所述目标消息存储至所述目标消息主题中，并建立每个所述消费组与存储在所述目标消息主题中的目标消息之间的对应关系。

在一种可选实施方式中，所述从所述目标消息主题中消费所述目标消息，将所述目标消息中的待存储数据存储至所述目标存储集群的所有集群存储节点中，包括：