[发明专利]一种实现上网流量记录预处理的方法及装置

权利要求书

1.一种实现上网流量记录预处理的方法，其特征在于，包括：

按照预设周期，计算各省预设时长内预设周期的平均话单数；

从未被分配的各省的话单中，逐一选择平均话单数最大的省的平均话单数个话单分配给未被分配话单的预处理服务器；

各预处理服务器均被分配话单时，从未被分配的各省的话单中，将平均话单数最大的省的平均话单数个话单分配给被分配话单最少的预处理服务器中；

以分配至各预处理服务器的话单总数作为话单数集合，根据话单数集合确定是否微调分配到各预处理服务器中的话单，话单分配完成后，进行上网流量记录的预处理；

所述上网流量记录为话单中包含的记录；

各省预设时长的话单为各省预设时长内采集机采集的话单；

其中，所述根据话单数集合确定是否微调分配到各预处理服务器中的话单包括：

计算所述话单数集合的标准差；

话单数集合的标准差大于预设的标准阈值时，从分配最多话单的预处理服务器中拆分话单数最多的采集机的话单到分配最少话单的预处理服务器中，并重新计算所述话单数集合的标准差，直至话单数集合的标准差小于或等于预设的标准阈值时，确定话单分配完成，进行所述上网流量记录的预处理。

2.根据权利要求1所述的方法，其特征在于，该方法之前还包括：

对各省内的各采集机的话单添加相应的采集区分编码；对各省的话单添加相应的省分编码。

3.根据权利要求1所述的方法，其特征在于，所述标准阈值为：

开根号计算需预处理的上网流量记录的省的个数除以预处理服务器个数的商，获得标准阈值系数；以需预处理的上网流量记录的各省预设时长的话单作为预设时长话单集合，计算预设时长话单集合的标准差；

将标准阈值系数乘以预设时长话单集合的标准差获得所述标准阈值。

4.根据权利要求1或3所述的方法，其特征在于，当预处理服务器中被分配的话单数大于预先设定的负载阈值时，该方法还包括：

从分配至该预处理服务器的话单中拆分话单数最多的采集机的话单到被分配最少话单的预处理服务器中，直至预处理服务器中被分配的话单数小于或等于预先设定的负载阈值。

5.一种实现上网流量记录预处理的装置，其特征在于，包括：计算单元、第一分配单元、第二分配单元和第一微调单元；其中，

计算单元，用于按照预设周期，计算各省预设时长内预设周期的平均话单数；

第一分配单元，用于从未被分配的各省的话单中，逐一选择平均话单数最大的省的平均话单数个话单分配给未被分配话单的预处理服务器；

第二分配单元，用于各预处理服务器均被分配话单时，从未被分配的各省的话单中，将平均话单数最大的省的平均话单数个话单分配给被分配话单最少的预处理服务器中；

第一微调单元，用于以分配至各预处理服务器的话单总数作为话单数集合，根据话单数集合确定是否微调分配到各预处理服务器中的话单，话单分配完成后，进行上网流量记录的预处理；

其中，所述第一微调单元具体用于，计算所述话单数集合的标准差；

话单数集合的标准差大于预设的标准阈值时，从分配最多话单的预处理服务器中拆分话单数最多的采集机的话单到分配最少话单的预处理服务器中，并重新计算所述话单数集合的标准差，直至话单数集合的标准差小于或等于预设的标准阈值时，确定话单分配完成，进行所述上网流量记录的预处理。

6.根据权利要求5所述的装置，其特征在于，该装置还包括添加编码单元，用于对各省内的各采集机的话单添加相应的采集区分编码；对各省的话单添加相应的省分编码，以区分各省话单和各省话单中各采集机采集的话单。

7.根据权利要求6所述的装置，其特征在于，所述标准阈值为：开根号计算需预处理的上网流量记录的省的个数除以预处理服务器个数的商，获得标准阈值系数；以需预处理的上网流量记录的各省预设时长的话单作为预设时长话单集合，计算预设时长话单集合的标准差；

将标准阈值系数乘以预设时长话单集合的标准差获得所述标准阈值。

8.根据权利要求5或7所述的装置，其特征在于，该装置还包括第二微调单元，用于当预处理服务器中被分配的话单数大于预先设定的负载阈值时，从分配至该预处理服务器的话单中拆分话单数最多的采集机的话单到被分配最少话单的预处理服务器中，直至预处理服务器中被分配的话单数小于或等于预先设定的负载阈值。