[发明专利]一种数据标注项质检方法及系统

说明书

本发明提供一种数据标注项质检方法、系统、电子设备及存储介质，方法包括：逐一对所有的标注项标进行初检，生成每一个标注项的初检结论，所述初检结论包括初检通过结论和初检不通过结论；若所有标注项的初检结论为通过，则对应的数据合格，提交交付；若所有标注项的初检结论中存在有初检不通过结论，则将初检不通过结论返回，以便根据初检不通过结论确定对相应的标注项进行修改或者对有异议的标注项请求仲裁。本发明提出一种优化标注数据质检流程的方案，通过项目逐个审核，二次审核与异议项目仲裁等方法相结合的方式提高数据质检效率并提高数据质量。

技术领域

本发明涉及乳尖测试质检领域，更具体地，涉及一种数据标注项质检方法及系统。

背景技术

数据标注是通过数据加工人员借助类似于BasicFinder这样的标记工具，对人工智能学习数据进行加工的一种行为。通常数据标注的类型包括：图像标注、语音标注、文本标注、视频标注等种类。标记的基本形式有标注画框、3D画框、文本转录、图像打点、目标物体轮廓线等。

随着AI，自动驾驶等行业蓬勃发展，数据标注需求量越来越大，传统方法是由人工抽查做质量检查，通过人工质检后查看合格率，通常每返回一批数据就抽查一次，耗时耗力。

发明内容

本发明针对现有技术中存在的技术问题，提供一种数据标注项质检方法及系统。

根据本发明的第一方面，提供了一种数据标注项质检方法，包括：逐一对所有的标注项标进行初检，生成每一个标注项的初检结论，所述初检结论包括初检通过结论和初检不通过结论；若所有标注项的初检结论为通过，则对应的数据合格，提交交付；若所有标注项的初检结论中存在有初检不通过结论，则将初检不通过结论返回，以便根据初检不通过结论确定对相应的标注项进行修改或者对有异议的标注项请求仲裁。

在上述技术方案的基础上，本发明还可以作出如下改进。

可选的，所述初检不通过结论中包括初检不通过的具体描述信息，所述具体描述信息至少包括属性错误、多标注和漏标注。

可选的，所述若所有标注项的初检结论中存在有初检不通过结论，则将初检不通过结论返回，以便根据初检不通过结论确定对相应的标注项进行修改或者对有异议的标注项请求仲裁，包括：若所有标注项的初检结论中存在有初检不通过结论，若对标注项的初检不通过结论存在异议，则对存在异议的标注项提交仲裁请求，对不存在异议的标注项，根据初检不通过结论中的具体描述信息，对标注项进行修改。

可选的，所述若所有标注项的初检结论为通过，则对应的数据合格，提交交付，之前还包括：若所有标注项的初检结论为通过，如果需要复检，则对所有标注项进行复检，复检均通过后，对相应的数据提交交付；如果不需要复检，则直接对相应的数据提交交付。

可选的，所述如果需要复检，则对所有标注项进行复检，复检均通过后，对相应的数据提交交付，包括：逐一对所有的标注项进行复检，生成每一个标注项的复检结论，所述复检结论包括复检通过结论和复检不通过结论；当所有的标注项的复检结论均为复检通过结论时，则相应的数据合格，对相应的数据提交交付；当所有的标注项的复检结论中存在复检不通过结论时，将复检不通过结论返回，以便根据复检不通过结论确定对相应的标注项进行修改或者对有异议的标注项请求仲裁。

可选的，还包括：根据仲裁请求，对相应的标注项进行仲裁，生成仲裁结论，其中，当仲裁发生在初检阶段，则仲裁结论为初检结论；若仲裁发生在复检阶段，则仲裁结论为复检结论。

可选的，所述仲裁结论的优先级大于初检结论和复检结论的优先级。