[发明专利]样本标注资源分配方法、装置及应用

权利要求书

1.一种样本标注资源分配方法，其特征在于，包括以下步骤：

获取样本集以及标注员列表；

预设标注人数，针对样本集中的任一交易样本，从标注员列表中选择数量为预设标注人数的多个标注员生成标注员集合，并分配给标注员集合中每一标注员进行标注，得到标注结果；

记录所有标注员对交易样本的标注完成时间，取最晚时刻的标注完成时间作为标注结果进入审核节点的审核开始时间；

将每相邻两个审核开始时间之间的时间间隔与历史审核间隔进行计算，得到审核资源闲置程度；

预设审核忙碌条件以及审核空闲条件，当审核资源闲置程度满足审核空闲条件，增加标注人数，并根据增加的标注人数增设标注员对剩余交易样本进行标注；当审核闲置程度满足审核空闲条件，减少标注人数，并根据减少的标注人数精简标注员对剩余交易样本进行标注，并基于调整后的标注人数重为剩余交易样本生成标注员集合。

2.根据权利要求1所述的样本标注资源分配方法，其特征在于，计算所有未审核的标注结果的时间间隔总和以及待审核数量；计算审核数量与历史审核间隔的乘积与时间间隔总和的差值作为审核资源闲置程度。

3.根据权利要求1所述的样本标注资源分配方法，其特征在于，遍历计算所有时间间隔与历史审核间隔的差值，若差值小于第一阈值，记录为审核资源忙碌，若差值大于第二阈值，记录为审核资源空闲；根据所有未审核的标注结果对应的审核资源忙碌和审核资源空闲的计数比值作为审核资源闲置程度。

4.根据权利要求1所述的样本标注资源分配方法，其特征在于，“获取标注员列表”包括：获取预计完成时间相接近的多个标注员生成标注员列表。

5.根据权利要求1所述的样本标注资源分配方法，其特征在于，标注员列表记录预计完成时间总差值小于阈值的多个标注员，其中，预计完成时间总差值表征为：根据标注员的标注速度以及当前任务数，得到每个标注员对交易样本进行标注的预计完成时间，对所有预计完成时间进行排序，计算每两个预计完成时间的差值，将差值小于阈值的最大差值作为总差值。

6.根据权利要求5所述的样本标注资源分配方法，其特征在于，若标注员的当前任务数达到任务饱和量，则将标注员从排序列表中剔除。

7.根据权利要求1所述的样本标注资源分配方法，其特征在于，在审核节点中自动获取每个标注结果中特征词在标注样本中的位置信息，通过比较位置信息的相似性确定标注结果是否正确。

8.一种样本标注资源分配装置，其特征在于，包括：

获取模块，用于获取样本集以及标注员列表；

标注模块，用于预设标注人数，针对样本集中的任一交易样本，从标注员列表中选择数量为预设标注人数的多个标注员生成标注员集合，并分配给标注员集合中每一标注员进行标注，得到标注结果；

时间记录模块，用于记录所有标注员对交易样本的标注完成时间，取最晚时刻的标注完成时间作为标注结果进入审核节点的审核开始时间；

计算模块，用于将每相邻两个审核开始时间之间的时间间隔与历史审核间隔进行计算，得到审核资源闲置程度；

标注人数调整模块，用于预设审核忙碌条件以及审核空闲条件，当审核资源闲置程度满足审核空闲条件，增加标注人数，并根据增加的标注人数增设标注员对剩余交易样本进行标注；当审核闲置程度满足审核空闲条件，减少标注人数，并根据减少的标注人数精简标注员对剩余交易样本进行标注，并基于调整后的标注人数重为剩余交易样本生成标注员集合。

9.一种可读存储介质，其特征在于，所述可读存储介质中存储有计算机程序，所述计算机程序包括用于控制过程以执行过程的程序代码，所述过程包括根据权利要求1至7任一项所述的样本标注资源分配方法。