[发明专利]处理数据的方法和装置

摘要

本申请提供了一种处理数据的方法和装置，该方法包括：主应用获取该主应用和至少一个备应用中的多个客户端模块的标识信息；该主应用根据该标识信息确定第一客户端模块的第一预配置关系和第二预配置关系，其中，该第一客户端模块为多个客户端模块中的任意一个，该第一预配置关系用于指示该第一客户端模块从卡夫卡kafka系统中获取第一数据块的分区位置，该第二预配置关系用于指示该第一客户端模块将处理的所述第一数据块存储至该kafka系统中的分区位置。本申请实施例的技术方案，能够保证处理数据块时分区有序。

主权项

1.一种处理数据的方法，其特征在于，所述方法适用于包括主应用和至少一个备应用的分布式系统中，所述主应用和至少一个备应用中的每一个应用包括至少一个客户端模块，所述客户端模块用于获取卡夫卡kafka系统中的数据块和向所述kafka系统存储应用处理后的数据块，所述方法包括：所述主应用获取所述主应用和至少一个备应用中的多个客户端模块的标识信息；所述主应用根据所述标识信息确定第一客户端模块的第一预配置关系和第二预配置关系，其中，所述第一客户端模块为所述多个客户端模块中的任意一个，所述第一预配置关系用于指示所述第一客户端模块从所述kafka系统中获取第一数据块的分区位置，所述第二预配置关系用于指示所述第一客户端模块将处理的所述第一数据块存储至所述kafka系统中的分区位置。