[发明专利]日志数据备份方法、装置、设备及存储介质

权利要求书

1.一种日志数据备份方法，其特征在于，包括：

从第一集群中每个区域服务的预写日志文件中采集所述每个区域服务对应的多条日志记录，其中，每个区域服务预先分配有至少一个预分配存储区域，第一集群为HBase集群；

从所述至少一个预分配存储区域中分别确定每条日志记录对应的目标存储区域；

采用所述目标存储区域对应的目标解析线程，对所述每条日志记录进行解析处理，得到所述每条日志记录中的日志数据；

对所述多条日志记录中的日志数据进行备份。

2.根据权利要求1所述的方法，其特征在于，所述采用所述目标存储区域对应的目标解析线程，对所述每条日志记录进行解析处理，得到所述每条日志记录中的日志数据，包括：

采用所述目标解析线程，将所述每条日志记录反序列化为单位对象；

根据预设的开始字符和读取长度，从所述单位对象中读取字节数组；

将读取到的字节数组写入预设的数据对象，得到所述每条日志记录中的日志数据。

3.根据权利要求2所述的方法，其特征在于，所述根据预设的开始字符和读取长度，从所述单位对象中读取字节数组，包括：

根据每个属性特征对应的所述开始字符和所述读取长度，从所述单位对象中读取所述每个属性特征；所述字节数组包括：读取到的至少一个属性特征。

4.根据权利要求1所述的方法，其特征在于，所述每个区域服务还具有迁移存储区域，所述迁移存储区域为从其他区域服务迁移的存储区域；

所述采用所述目标存储区域对应的目标解析线程，对所述每条日志记录进行解析处理，得到所述每条日志记录中的日志数据，包括：

若待解析日志记录对应的目标存储区域为所述迁移存储区域，获取所述其他区域服务中最新解析的日志记录的第一序列标识，与所述待解析日志记录的第二序列标识的偏差；

若所述偏差大于预设的标识单位偏差，则在所述其他区域服务中采用所述迁移存储区域对应的解析线程对所述第二序列标识之前的日志记录进行解析；

在对所述第二序列标识之前的日志记录解析完成之后，在所述每个区域服务中采用所述迁移存储区域对应的解析线程，解析所述待解析日志记录，得到所述待解析日志记录中的日志数据。

5.根据权利要求1所述的方法，其特征在于，所述从第一集群中每个区域服务的预写日志文件中采集所述每个区域服务对应的多条日志记录，包括：

采用所述每个区域服务对应的采集线程，从所述预写日志文件中采集所述多条日志记录。

6.根据权利要求5所述的方法，其特征在于，所述采用所述采集线程，从所述预写日志文件中采集所述多条日志记录，包括：

采用所述采集线程，从所述预写日志文件中前一次读取位置之后开始读取预设读取范围内的所述多条日志记录。

7.根据权利要求6所述的方法，其特征在于，所述采用所述采集线程，从所述预写日志文件中前一次读取位置之后开始读取预设读取范围内的所述多条日志记录，包括：

采用所述采集线程，判断所述预写日志文件中所述预设读取范围内是否具有日志记录；

若没有日志记录，则等待预设时长之后，从所述前一次读取位置之后开始重新读取所述预设读取范围内的所述多条日志记录。

8.根据权利要求1所述的方法，其特征在于，所述从第一集群中每个区域服务的预写日志文件中采集所述每个区域服务对应的多条日志记录之前，所述方法还包括：

根据所述每个区域服务对应的预设日志存储范围，从所述第一集群的预写日志文件中确定所述每个区域服务的预写日志文件。

9.根据权利要求1所述的方法，其特征在于，所述从所述至少一个预分配存储区域中分别确定每条日志记录对应的目标存储区域，包括：

获取所述每条日志记录针对的业务数据在HBase数据库中的存储位置；

根据所述存储位置和每个预分配存储区域对应的存储位置范围，确定所述每条日志记录对应的目标存储区域。