[发明专利]标注处理方法、装置、设备以及存储介质

说明书

本公开提供了一种标注处理方法、装置、设备以及存储介质。涉及样本标注、样本质检等人工智能领域。具体实现方案为：确定待标注样本；获取目标模型基于待标注样本输出的第一标注结果；获取第一标注平台基于待标注样本输出的第二标注结果；对比第一标注结果与第二标注结果之间的差异；基于差异从待标注样本中确定出第一标注样本，第一标注样本是需要验证的样本。根据本公开的技术方案，能提高样本标注的效率，提升样本标注的质检质量。

技术领域

本公开涉及样本标注、样本质检等人工智能领域，具体涉及一种标注处理方法、装置、设备以及存储介质。

背景技术

人工智能应用落地过程中，数据标注的质量决定了人工智能的落地的好坏。对于一个新的标注任务，常规的操作流程包括设计标注文档、收集数据、送标数据、人工标注、随机质检、返回标注数据等。一个完整的操作流程往往需要很多的人力、标注周期也很长。一般为了加快标注效率，会考虑增加人力，多线并行处理。然而，每个标注人员对于标注规则的理解是有偏差的，所以标注结果难免会有轻微的不同，当待标注的数据量增大时，标注的质量也会随之下降，而随机质检对于样本的标注质量无法有效掌控。

发明内容

本公开提供了一种标注处理方法、装置、设备以及存储介质。

根据本公开的第一方面，提供了一种标注处理方法，包括：

确定待标注样本；

获取目标模型基于待标注样本输出的第一标注结果；

获取第一标注平台基于待标注样本输出的第二标注结果；

对比第一标注结果与第二标注结果之间的差异；

基于该差异从待标注样本中确定出第一标注样本，该第一标注样本是需要验证的样本。

根据本公开的第二方面，提供了一种标注处理装置，包括：

第一确定模块，用于确定待标注样本；

第一获取模块，用于获取目标模型基于待标注样本输出的第一标注结果；

第二获取模块，用于获取第一标注平台基于待标注样本输出的第二标注结果；

对比模块，用于对比第一标注结果与第二标注结果之间的差异；

第二确定模块，用于基于该差异从待标注样本中确定出第一标注样本，该第一标注样本是需要验证的样本。

根据本公开的第三方面，提供了一种电子设备，包括：

至少一个处理器；以及

与该至少一个处理器通信连接的存储器；其中，

该存储器存储有可被该至少一个处理器执行的指令，该指令被该至少一个处理器执行，以使该至少一个处理器能够执行上述第一方面所提供的方法。

根据本公开的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，该计算机指令用于使该计算机执行上述第一方面所提供的方法。

根据本公开的第五方面，提供了一种计算机程序产品，包括计算机程序，该计算机程序在被处理器执行时实现上述第一方面所提供的方法。

本公开实施例，能提高样本标注的效率，提升样本标注的质检质量。

应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

附图说明

附图用于更好地理解本方案，不构成对本公开的限定。其中：

图1是根据本公开一实施例的标注处理方法的流程示意图；