[发明专利]数据处理方法以及装置

权利要求书

1.一种数据处理方法，包括：

接收针对目标对象的待存储数据的数据存储请求，其中，所述数据存储请求中携带有待存储数据的属性信息以及目标对象的对象标签；

基于待存储数据的属性信息确定所述待存储数据的创建时间戳和最新时间戳，并基于所述创建时间戳和所述最新时间戳确定数据分区策略，且根据所述数据分区策略创建数据分区；

确定所述每个数据分区中所述目标对象的待存储数据，且确定所述待存储数据对应的索引数据；

基于所述索引数据对应的数据分区，所述数据分区对应的目标对象以及所述目标对象的对象标签构建第一索引表，并基于所述第一索引表将每个数据分区的待存储数据进行数据存储。

2.根据权利要求1所述的数据处理方法，所述基于所述第一索引表将每个数据分区的待存储数据进行数据存储，包括：

基于所述第一索引表中的所述数据分区对应的目标对象、所述目标对象的对象标签以及所述目标对象的待存储数据的属性信息构建第二索引表；

基于所述第一索引表以及所述第二索引表获取每个数据分区的待存储数据的存储偏移位；

根据所述存储偏移位将所述待存储数据进行存储。

3.根据权利要求1或2所述的数据处理方法，还包括：

接收数据查询请求，其中，所述数据查询请求中携带有待查询数据的属性信息；

基于所述待查询数据的属性信息在所述第一索引表中确定所述待查询数据的数据分区，并基于所述数据分区在所述第一索引表中确定所述数据分区对应目标对象以及所述目标对象的对象标签；

基于所述目标对象以及所述目标对象的对象标签进行数据查询。

4.根据权利要求3所述的数据处理方法，所述基于所述目标对象以及所述目标对象的对象标签进行数据查询，包括：

基于所述目标对象以及所述目标对象的对象标签，判断所述第二索引表中是否存在与所述待查询数据的属性信息匹配的属性信息；

若是，则基于所述目标对象确定所述待查询数据的存储偏移位，并基于所述存储偏移位查询所述待查询数据。

5.根据权利要求1所述数据处理方法，所述根据所述存储偏移位将所述待存储数据进行存储之后，还包括：

将所述第一索引表按照所述每个数据分区进行合并，获得合并后的倒排索引文件，并将所述合并后的倒排索引文件进行存储；以及

将所述第二索引表按照所述每个数据分区进行合并，获得合并后的正排索引文件，并将所述合并后的正排索引文件进行存储。

6.根据权利要求1或5所述的数据存储方法，所述基于待存储数据的属性信息确定所述待存储数据的创建时间戳和最新时间戳，包括：

基于所述待存储数据的属性信息获取所述待存储数据的创建时间戳和最新时间戳，并将所述创建时间戳和所述最新时间戳写入日志文件进行存储。

7.根据权利要求6所述的数据存储方法，所述基于所述第一索引表将每个数据分区的待存储数据进行数据存储，包括：

基于所述待存储数据的最新的时间戳以及所述数据分区策略创建新的数据分区；

根据所述新的数据分区更新所述新的数据分区对应的第一索引表，并基于所述第一索引表将所述新的数据分区的待存储数据进行存储。

8.根据权利要求2所述的数据存储方法，所述基于所述第一索引表将每个数据分区的待存储数据进行数据存储之后，还包括：

基于预设需求将所述数据分区的待存储数据进行删除。