[发明专利]机器学习模型的获取方法、获取装置、设备及存储介质有效

专利信息
申请号: 201810619091.5 申请日: 2018-06-15
公开(公告)号: CN109034188B 公开(公告)日: 2021-11-05
发明(设计)人: 刘世权;刘弘也;苏驰 申请(专利权)人: 北京金山云网络技术有限公司;北京金山云科技有限公司
主分类号: G06K9/62 分类号: G06K9/62
代理公司: 北京柏杉松知识产权代理事务所(普通合伙) 11413 代理人: 丁芸;项京
地址: 100085 北京*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 机器 学习 模型 获取 方法 装置 设备 存储 介质
【权利要求书】:

1.一种机器学习模型的获取方法,其特征在于,所述方法包括:

获取标注有类别的第一样本图片;

将所述标注有类别的第一样本图片作为训练样本,训练得到机器学习模型;

将第二样本图片输入至所述机器学习模型,获取所述机器学习模型预测的所述第二样本图片的类别,所述第二样本图片为不含有标注类别的图片;

确定所述机器学习模型所预测的具有正确类别的第二样本图片;

将所述具有正确类别的第二样本图片作为训练样本输入所述机器学习模型,训练得到新的机器学习模型,所述新的机器学习模型用于对图片的类别进行预测;

其中,所述获取标注有类别的第一样本图片,包括:

获取多张待标注类别的图片,将多张图片划分为若干份;

将划分后的每份图片分配给至少两个标注者;

针对划分后的每份图片,获取所述至少两个标注者的标注结果数据,每个标注者的标注结果数据中,均携带有与该份图片中的各图片对应的预标注类别;

针对所述每份图片中的每张图片,对比该张图片在所述至少两个标注者的标注结果数据中的预标注类别是否相同,确定所述每份图片中在所述至少两个标注者的标注结果数据中的预标注类别均相同的图片的数量;

针对划分后的每份图片,基于所确定的所述预标注类别均相同的图片的数量与该份图片总数量的比例关系,确定该份图片中图片的标注类别,并将确定标注类别后的图片作为第一样本图片;

所述标注者包括至少三个;

所述针对划分后的每份图片,基于所确定的所述预标注类别均相同的图片的数量与该份图片总数量的比例关系,确定该份图片中图片的标注类别,包括:

如果划分后的其中一份图片中,所确定的所述预标注类别均相同的图片的数量,与该份图片总数量之比小于第一预设阈值,获取所述至少三个标注者的标注结果数据中两个标注结果数据的相似度;

当所述至少三个标注者的标注结果数据中,存在相似度高于第二预设阈值的两个标注结果数据时:

确定相似度最高的两个标注结果数据;

将所述相似度最高的两个标注结果数据中,具有相同预标注类别的图片的预标注类别确定为所述图片的标注类别,其中,两个标注结果数据的相似度为:该份图片在两个标注结果数据中,具有相同预标注类别的图片的数量与该份图片数量的比值。

2.根据权利要求1所述的方法,其特征在于,所述针对划分后的每份图片,基于所确定的所述预标注类别均相同的图片的数量与该份图片总数量的比例关系,确定该份图片中图片的标注类别,包括:

如果划分后的其中一份图片中,所确定的所述预标注类别均相同的图片的数量与该份图片总数量之比大于或等于第一预设阈值,将所述预标注类别均相同的图片的预标注类别确定为所述图片的标注类别。

3.根据权利要求2所述的方法,其特征在于,所述将所述预标注类别均相同的图片的预标注类别确定为所述图片的标注类别之后,所述方法还包括:

对该份图片中所述预标注类别不同的图片进行再次标注。

4.根据权利要求1所述的方法,其特征在于,所述针对划分后的每份图片,基于所确定的所述预标注类别均相同的图片的数量与该份图片总数量的比例关系,确定该份图片中图片的标注类别,包括:

如果划分后的其中一份图片中,所确定的所述预标注类别均相同的图片的数量与该份图片总数量之比小于第一预设阈值,删除与该份图片对应的所述至少两个标注者的标注结果数据,并对该份图片中的图片进行再次标注。

5.根据权利要求1所述的方法,其特征在于,所述确定所述机器学习模型所预测的具有正确类别的第二样本图片,包括:

针对所获取的所述第二样本图片的每一种预测类别,将所述预测类别的第二样本图片分配给至少一个第三标注者,获取所述至少一个第三标注者对所述第二样本图片的所述预测类别的核验结果,所述核验结果指示了所述预测类别是否为所述预测类别的第二样本图片的正确类别;

根据所述至少一个第三标注者对所述第二样本图片的所述预测类别的核验结果,确定所述预测类别为正确类别的第二样本图片。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司;北京金山云科技有限公司,未经北京金山云网络技术有限公司;北京金山云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810619091.5/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top