[发明专利]用户数据处理方法及装置

权利要求书

1.一种用户数据处理方法，其特征在于，包括：

获取用户数据；

从所述用户数据中获取与配置条件匹配的目标数据；

基于所述目标数据，确定待处理任务；

在满足设定的任务处理条件的情况下，将所述待处理任务记录到第一数据库中，并基于所述第一数据库对所述待处理任务进行处理，得到处理结果，其中，所述第一数据库为基于大规模并行处理的数据库；

在所述第一数据库中以位图的形式存储所述处理结果。

2.根据权利要求1所述的方法，其特征在于，所述待处理任务包括多个任务，所述基于第一数据库对所述待处理任务进行处理，得到处理结果包括：

将所述待处理任务分为N组任务，基于所述第一数据库，通过N个线程对所述N组任务进行并行处理，得到N个处理结果；

其中，N为大于1的正整数。

3.根据权利要求1所述的方法，其特征在于，在所述确定待处理任务之后，所述方法还包括：

在基于第一数据库对所述待处理任务进行处理的过程中，记录所述待处理任务的处理状态，所述处理状态包括以下任一种：未处理、处理中、处理失败、处理成功和取消处理；

在接收到目标指令的情况下，获取所述待处理任务的处理状态，所述目标指令用于查询所述待处理任务的处理状态；

返回所述待处理任务的处理状态。

4.根据权利要求3所述的方法，其特征在于，

所述记录所述待处理任务的处理状态包括：在第二数据库中记录所述待处理任务的处理状态；

在接收到目标指令的情况下，获取所述待处理任务的处理状态包括：在接收到目标指令的情况下，从所述第二数据库中获取目标任务，所述目标任务为所述待处理任务中处于处理中的任务；通过调用所述第一数据库的命令获取所述目标任务的处理状态；

所述返回所述待处理任务的处理状态包括：返回所述目标任务的处理状态。

5.根据权利要求4所述的方法，其特征在于，在所述调用所述第一数据库的命令获取所述目标任务的处理状态之后，所述方法还包括：

确定所述目标任务的第一处理状态与第二处理状态的匹配结果，所述第一处理状态为通过调用所述第一数据库的命令获取的所述目标任务的处理状态，所述第二处理状态为所述第二数据库中记录的所述目标任务的处理状态；

在所述目标任务的第一处理状态与第二处理状态不匹配的情况下，将所述目标任务的第二处理状态更新为，所述目标任务的第一处理状态；

其中，在相同的单位时间内，所述第一数据库比第二数据库的数据处理速度更快或者所述第一数据库比第二数据库的数据处理效率更高。

6.根据权利要求4所述的方法，其特征在于，所述待处理任务包括多个任务，

在接收到目标指令的情况下，从所述第二数据库中获取目标任务包括：在接收到目标指令的情况下，通过多线程分片查询获取所述第二数据库的目标任务。

7.根据权利要求1所述的方法，其特征在于，所述基于所述目标数据，确定待处理任务包括：

利用位图函数对所述目标数据进行去重，得到待处理任务。

8.根据权利要求1所述的方法，其特征在于，

所述获取用户数据包括：接收导入的用户数据，所述用户数据包括：离线数据、实时数据和事件数据中的至少一种；

所述方法还包括：对所述用户数据进行统一标准化。