[发明专利]Kafka同步刷盘方法、装置及消息服务器

权利要求书

1.一种Kafka同步刷盘方法，其特征在于，包括：

在针对目标磁盘的刷盘前置条件检查通过后执行预设的Kafka消息中间件的刷盘步骤；

其中，所述Kafka消息中间件的刷盘步骤包括：更新当前的目标时刻，向截止至所述目标时刻确定的多个消息写入线程发出刷盘权力争夺指令，将其中争夺到刷盘权力的一个消息写入线程确定为刷盘线程，并应用该刷盘线程将Kafka内存中截止至所述目标时刻获取的全部消息对象均刷新至所述目标磁盘；

应用所述刷盘线程向当前所有处于等待状态中的消息写入线程分别发送刷盘完成通知，以针对在所述目标时刻之后新增的消息写入线程再次执行所述Kafka消息中间件的刷盘步骤。

2.根据权利要求1所述的Kafka同步刷盘方法，其特征在于，所述应用所述刷盘线程向当前所有处于等待状态中的消息写入线程分别发送刷盘完成通知，以针对在所述目标时刻之后新增的消息写入线程再次执行所述Kafka消息中间件的刷盘步骤，包括：

应用所述刷盘线程向当前所有处于等待状态中的消息写入线程分别发送刷盘完成通知；

应用接收到所述刷盘完成通知的各个所述消息写入线程分别检测各自对应的消息对象是否已刷新至所述目标磁盘；

若存在检测到自身对应的消息对象未刷新至所述目标磁盘的消息写入线程，则将该消息写入线程确定为在所述目标时刻之后新增的消息写入线程；

针对在所述目标时刻之后新增的各个消息写入线程再次执行所述Kafka消息中间件的刷盘步骤。

3.根据权利要求1所述的Kafka同步刷盘方法，其特征在于，还包括：

判断当前处于等待状态中的各个所述消息写入线程是否均在预设的等待时间内收到所述刷盘线程发送的刷盘完成通知；

若存在未在所述等待时间内收到所述刷盘线程发送的刷盘完成通知的处于等待状态中的消息写入线程，则针对该消息写入线程再次执行所述Kafka消息中间件的刷盘步骤。

4.根据权利要求3所述的Kafka同步刷盘方法，其特征在于，在所述判断当前处于等待状态中的各个所述消息写入线程是否均在预设的等待时间内收到所述刷盘线程发送的刷盘完成通知之前，还包括：

获取多份历史刷盘耗时数据；

根据多份所述历史刷盘耗时数据确定刷盘平均时间；

基于所述刷盘平均时间设置预设的等待时间，其中，该等待时间大于所述刷盘平均时间。

5.根据权利要求1所述的Kafka同步刷盘方法，其特征在于，在所述在针对目标磁盘的刷盘前置条件检查通过后执行预设的Kafka消息中间件的刷盘步骤之前，还包括：

获取线程的同步锁，并生成对应的生成偏移量和时间戳信息；

释放所述同步锁，并进行针对目标磁盘的刷盘前置条件检查。

6.根据权利要求5所述的Kafka同步刷盘方法，其特征在于，在所述获取线程的同步锁之前，还包括：

对内存中的消息对象进行消息核验和消息无效字节截断处理。

7.根据权利要求1所述的Kafka同步刷盘方法，其特征在于，在所述在针对目标磁盘的刷盘前置条件检查通过后执行预设的Kafka消息中间件的刷盘步骤之前，还包括：

接收至少一个消息生产者发送的消息对象，并将所述消息对象存至内存。

8.根据权利要求7所述的Kafka同步刷盘方法，其特征在于，还包括：

在应用该刷盘线程将Kafka内存中截止至所述目标时刻获取的全部消息对象均刷新至所述目标磁盘之后，向发出消息对象的所述消息生产者发送刷盘成功结果消息。

9.根据权利要求1所述的Kafka同步刷盘方法，其特征在于，包括：

接收消息消费者发送的信息提取请求，其中，该信息提取请求中包含有信息关键字；

根据所述信息关键字将对应的消息对象发送至所述消息消费者。