[发明专利]一种基于概率分布的异常数据处理方法及装置

权利要求书

1.一种基于概率分布的异常数据处理方法，其特征在于，包括：

对目标数据集合中的正常数据进行分组；

根据所述正常数据和分组结果，获取所述目标数据集合的概率分布；

根据所述概率分布和所述目标数据集合中异常数据的个数，生成随机数，并使用所述随机数替换所述异常数据。

2.根据权利要求1所述的方法，其特征在于，对目标数据集合中的正常数据进行分组的步骤具体包括：

基于组距分组方法、分位数分组方法、单变量分组方法或基于信息熵的分组方法，对目标数据集合中的正常数据进行分组。

3.根据权利要求1所述的方法，其特征在于，对目标数据集合中的正常数据进行分组的步骤具体包括：

当所述目标数据集合中的数据为连续型数据时，将所述目标数据集合中的数据划分为多个区间；

当所述目标数据集合中的数据为离散型数据时，将所述目标数据集合中的数据划分为多个类别。

4.根据权利要求3所述的方法，其特征在于，根据所述正常数据和分组结果，获取所述目标数据集合的概率分布的步骤具体包括：

统计所述目标数据集合中各所述区间或各所述类别的正常数据的个数；

使用各所述区间或各所述类别的正常数据的个数除以所述正常数据的总个数，获取所述目标数据集合中数据属于各所述区间或各所述类别的概率。

5.根据权利要求4所述的方法，其特征在于，所述随机数的个数与所述异常数据的个数相同，所述随机数按照所述概率进行分布。

6.根据权利要求1-5任一所述的方法，其特征在于，在对目标数据集合中的正常数据进行分组之前还包括：

基于异常数据检测算法对目标数据集合进行检测，获取所述目标数据集合中的异常数据，将所述目标数据集合中除所述异常数据以外的数据作为正常数据。

7.一种基于概率分布的异常数据处理装置，其特征在于，包括：

分组模块，用于对目标数据集合中的正常数据进行分组；

获取模块，用于根据所述正常数据和分组结果，获取所述目标数据集合的概率分布；

生成模块，用于根据所述概率分布和所述目标数据集合中异常数据的个数，生成随机数，并使用所述随机数替换所述异常数据。

8.根据权利要求7所述的装置，其特征在于，分组模块具体用于：

基于组距分组方法、分位数分组方法、单变量分组方法或基于信息熵的分组方法，对目标数据集合中的正常数据进行分组。

9.一种电子设备，其特征在于，包括：

至少一个处理器、至少一个存储器和总线；其中，

所述处理器和存储器通过所述总线完成相互间的通信；

所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行如权利要求1至6任一所述的方法。

10.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求1至6任一所述的方法。