[发明专利]审核模式优化方法、装置及电子设备有效
申请号: | 201910960127.0 | 申请日: | 2019-10-10 |
公开(公告)号: | CN110781583B | 公开(公告)日: | 2023-04-18 |
发明(设计)人: | 韩华颂;朱承浩;介静涛;林群伟 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | G06F30/20 | 分类号: | G06F30/20 |
代理公司: | 北京风雅颂专利代理有限公司 11403 | 代理人: | 安凯 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 审核 模式 优化 方法 装置 电子设备 | ||
本公开实施例提供了一种审核模式优化方法、装置及电子设备,属于仿真建模技术领域,该方法包括:提供审核过程仿真模型;根据审核结果确定审核模式下任务的准确率以及单位任务人力,其中所述单位任务人力指示所述审核模式下平均一个任务被审核的轮数;以及基于所述准确率以及单位任务人力优化所述审核模式。根据本公开实施例的方法通过仿真实验,对比不同审核模式的优劣,量化成质量、效率、成本指标,引导选择全局最优的审核模式。
技术领域
本公开涉及仿真建模技术领域,尤其涉及一种审核模式优化方法、装置及电子设备。
背景技术
仿真是一种对系统问题求数值解的计算技术,尤其当系统无法通过建立数学模型求解时,仿真技术能有效地来处理。仿真环境实验跟现实系统实验的差别在于,仿真实验不是依据实际环境,而是作为实际系统映像的系统模型以及相应的“人造”环境下进行的,通过系统的仿真,对一些难以建立物理模型和数学模型的对象系统,可通过仿真模型来顺利地解决预测、分析和评价等系统问题,可以把一个复杂系统降阶成若干子系统以便于分析。通过系统仿真实验能启发新的思想或产生新的模式,还能暴露出原系统中隐藏着的一些问题,以便及时解决。
随着互联网技术的发展,大量的互联网资源被上传到网络平台上,对于这些上传的互联网资源,需要进行审核以确保其满足平台和国家法律的要求。现阶段,对于这些内容的审核多采用机器审核和人工审核相结合的方式。对于审核的质量,设置有一系列的质量指标,诸如整体的审核准确率、盲审准确率、召回率、下架率、模拟事故投放准确率、漏放率等。
通过对审核过程的仿真建模,以及审核员的审核行为(审核员准确率、规避率、作弊率、审核效率等,每个审核员都不是完全相同的,可以基于分布情况进行仿真)、各审核队列任务难度系数、审核模式、审核规则的建模与仿真,建立起审核仿真环境,基于该审核仿真环境可以例如优化审核过程,并将仿真实验结果可视化。
发明内容
有鉴于此,本公开实施例提供一种审核模式优化方法、装置及电子设备,以至少部分解决现有技术中存在的问题。
第一方面,本公开实施例提供了一种审核模式优化方法,所述方法包括:
提供审核过程仿真模型,所述审核过程仿真模型包括:
参数设置模块,被配置为设置所述审核过程仿真模型的参数,所述参数包括审核模式、审核员数据以及审核任务,所述审核模式包括与所述审核模式对应的抽样率,所述审核员数据包括审核员人数以及审核员的正确率,所述审核任务包含任务数量;
任务分配模块,根据所述审核模式将所述任务按顺序随机提供给带正确率标签的审核员;以及
审核结果确定模块,根据所述带正确率标签的审核员的正确率确定分配给所述审核员的任务的审核结果,
根据所述审核结果确定所述审核模式下所述任务的准确率以及单位任务人力,其中所述单位任务人力指示所述审核模式下平均一个任务被审核的轮数;以及
基于所述准确率以及单位任务人力优化所述审核模式。
根据本公开实施例的一种具体实现方式,所述审核模式包括以下中的至少一种:
质检,所述质检为按照所述抽样率随机抽出任务分配给不同初审人员进行盲审,并且在初审与盲审结果不一致的情况下将所述任务分给有质检权限的人员进行审核;
双审,所述双审与抽样率为1的质检等效;
抽检,所述抽检按照所述抽样率进行随机抽检,并将抽检出的任务分配给有抽检权限的人员进行审核;以及
标注,所述标注将任务分配给一个或多个不同的审核人员进行审核。
根据本公开实施例的一种具体实现方式,所述根据所述带正确率标签的审核员的正确率确定分配给所述审核员的任务的审核结果,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910960127.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种暗渠爆炸后果评估方法
- 下一篇:一种空军无人机智能仿真作战系统