[发明专利]标注任务处理方法、装置、设备、存储介质及程序产品有效
| 申请号: | 202110670535.X | 申请日: | 2021-06-17 |
| 公开(公告)号: | CN113313195B | 公开(公告)日: | 2023-09-29 |
| 发明(设计)人: | 杨雪 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
| 主分类号: | G06F18/40 | 分类号: | G06F18/40 |
| 代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 标注 任务 处理 方法 装置 设备 存储 介质 程序 产品 | ||
1.一种标注任务处理方法,应用于服务器,包括:
确定与待标注任务的需求项对应的第一能力项;其中,能力项用于表征标注能力,对应的表现为能力类别和每种能力类别下的能力值参数;
响应于不存在完全具有所述第一能力项的标注对象,将完整的待标注任务拆分为任务量不同的多份子标注任务;
将各所述子标注任务按份依次分配给当前标注轮次剩余的标注对象进行标注;其中,在上一份的子标注任务中实际标注正确率未超过预设标注正确率的标注对象将被排除在下一份的子标注任务的标注对象之外;
分别确定每个剩余标注对象所标注的子标注任务占完整的标注任务的任务量比值;其中,所述剩余标注对象为在参与所述子标注任务的任务前不完全具有所述第一能力项的标注对象;响应于所述任务量比值大于预设比值,确定与所述第一能力项对应的第一能力类别和第一能力值参数、确定与第二能力项对应的第二能力类别和第二能力值参数;根据所述第一能力类别和所述第二能力类别,确定相同能力类别和缺失能力类别;响应于所述相同能力类别下的第一能力值参数与所述第二能力值参数的差异小于预设第一差异,将所述第二能力值参数上调至所述第一能力值参数;为所述剩余标注对象新增与所述缺失能力类别对应的新能力项,并将所述新能力项的能力值参数调整为默认的初始数值;其中,所述初始数值表征所属能力项的能力等级为初等。
2.根据权利要求1所述的方法,其中,所述将各所述子标注任务按份依次分配给当前标注轮次剩余的标注对象进行标注,包括:
将各所述子标注任务按照任务数量从少到多的顺序,按份依次分配给当前轮次剩余的标注对象进行标注。
3.根据权利要求1所述的方法,还包括:
控制所述预设标注正确率的正确率数值随标注轮次的增加而增加;
和/或
控制所述预设标注正确率的正确率数值与当前标注轮次的任务量多少成反比。
4.根据权利要求1-3任一项所述的方法,还包括:
响应于被排除的标注对象的实际标注正确率与所述预设标注正确率的差异小于预设第二差异、且已进行的标注轮次大于预设轮次,对相同的子标注任务进行再次标注,得到经再次标注后得到的验证标注正确率;
响应于所述验证标注正确率大于所述预设标注正确率,将被排除的标注对象重新作为下一份的子标注任务的标注对象。
5.一种标注任务处理装置,应用于服务器,包括:
第一能力项确定单元,被配置成确定与待标注任务的需求项对应的第一能力项;其中,能力项用于表征标注能力,对应的表现为能力类别和每种能力类别下的能力值参数;
子标注任务拆分单元,被配置成响应于不存在完全具有所述第一能力项的标注对象,将完整的待标注任务拆分为任务量不同的多份子标注任务;
多标注轮次依次标注单元,被配置成将各所述子标注任务按份依次分配给当前标注轮次剩余的标注对象进行标注;其中,在上一份的子标注任务中实际标注正确率未超过预设标注正确率的标注对象将被排除在下一份的子标注任务的标注对象之外;
能力项调整单元,被配置成分别确定每个剩余标注对象所标注的子标注任务占完整的标注任务的任务量比值;其中,所述剩余标注对象为在参与所述子标注任务的任务前不完全具有所述第一能力项的标注对象;响应于所述任务量比值大于预设比值,确定与所述第一能力项对应的第一能力类别和第一能力值参数、确定与第二能力项对应的第二能力类别和第二能力值参数;根据所述第一能力类别和所述第二能力类别,确定相同能力类别和缺失能力类别;响应于所述相同能力类别下的第一能力值参数与所述第二能力值参数的差异小于预设第一差异,将所述第二能力值参数上调至所述第一能力值参数;为所述剩余标注对象新增与所述缺失能力类别对应的新能力项,并将所述新能力项的能力值参数调整为默认的初始数值;其中,所述初始数值表征所属能力项的能力等级为初等。
6.根据权利要求5所述的装置,其中,所述多标注轮次依次标注单元被进一步配置成:
将各所述子标注任务按照任务数量从少到多的顺序,按份依次分配给当前轮次剩余的标注对象进行标注。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110670535.X/1.html,转载请声明来源钻瓜专利网。





