[发明专利]消息数据服务集群

权利要求书

1.一种消息数据服务集群，包括用于存储主题消息数据的主题分区，所述主题分区包括分布在所述服务集群的不同服务端；其特征在于：所述主题消息数据以内存模式或者文件模式存储在所述服务集群中；

所述内存模式下，所述主题分区接收生产端产生的所述主题消息数据并映射到所述服务端的内存中；

所述文件模式下，所述主题分区接收生产端产生的所述主题消息数据并存储到所属服务端的硬盘中；

所述主题分区包括分布在所述服务集群的不同服务端中的主副本和从副本，所述从副本为所述主副本的冗余备份，所述主题分区通过所述主副本接收来自所述生产端的主题消息数据，所述主题分区通过所述主副本响应消费端的消费请求；

所述主题分区包括由所述从副本组成的保持同步副本集，所述保持同步副本集内的从副本相对于其他从副本用于更新的消息数据；当所述保持同步副本集中的所述从副本数量小于预设的最小同步副本数量时，所述主题分区不接收来自生产集群的主题消息数据；

在无保障等级下，所述主副本在接收到所述生产端发送的主题消息数据后，发送消息提交成功信息至所述生产端；

在快速等级下，所述主副本在接收到所述生产端发送的主题消息数据后同步给所述从副本，并且在收到第一个从副本的确定同步信息后，发送消息提交成功信息至所述生产端；

在安全等级下，所述主副本在接收到所述生产端发送的主题消息数据后同步给所述从副本，并且在收到大于所述保持同步副本集的从副本数量预设值个从副本的确定同步信息后，发送消息提交成功信息至所述生产端；

当所述主副本下线时，由保持同步副本集合中的各从副本将其最大逻辑版本号上报给管理集群，所述管理集群根据保持同步副本集合中所有所述从副本的最大逻辑版本号，选出最大逻辑版本号对应的从副本作为主副本。

2.根据权利要求1所述的一种消息数据服务集群，其特征在于：所述主题分区包括数据段落，所述数据段落包括所述主题消息数据和索引文件；所述索引文件记在所述主题消息数据的逻辑版本号与所述主题消息数据的物理偏移的一一映射关系。

3.根据权利要求2所述的一种消息数据服务集群，其特征在于：所述逻辑版本号反映所述主题消息数据到达所述服务集群的先后顺序。

4.根据权利要求3所述的一种消息数据服务集群，其特征在于：所述内存模式下，所述主题分区包括数据段落跳跃表，所述数据段落跳跃表包括多个数据层；下一数据层的节点数量大于上一数据层的节点数量，并且下一数据层包括上一数据层的所有节点，位于底层的数据层包括所述数据段落跳跃表的所有节点；所述节点包括段落数据，所述段落数据包括所述主题消息数据；所述节点包括其在下一数据层中的指针数据、所述节点所在数据层的下一节点的指针数据。

5.根据权利要求4所述的一种消息数据服务集群，其特征在于：所述文件模式下，所述主题分区记载所述数据段落与所述数据段落中的主题消息数据的物理偏移的范围。

6.根据权利要求5所述的一种消息数据服务集群，其特征在于：所述主副本记录其最新接收到的所述主题消息数据的有效逻辑版本号和缓存在内存中的所述主题消息数据的缓存逻辑版本号。

7.根据权利要求6所述的一种消息数据服务集群，其特征在于：生产端轮询各主题分区的主副本，以将其产生的主题消息数据分布式地存储在各主题分区中。

8.根据权利要求7所述的一种消息数据服务集群，其特征在于：消费端轮询各主题分区，以消费所述主题消息数据。

9.根据权利要求8所述的一种消息数据服务集群，其特征在于：所述主题分区在同一时刻最多允许同一消费集群中的一个消费端消费其主题消息数据。