[发明专利]基于无标注样本数据的目标分类模型训练方法及装置在审
申请号: | 202111591966.3 | 申请日: | 2021-12-23 |
公开(公告)号: | CN114419363A | 公开(公告)日: | 2022-04-29 |
发明(设计)人: | 李冠彬;黄俊凯;张津津;柴振华;魏晓林 | 申请(专利权)人: | 北京三快在线科技有限公司;中山大学 |
主分类号: | G06V10/764 | 分类号: | G06V10/764;G06V10/774;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 任亚娟 |
地址: | 100080 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 标注 样本 数据 目标 分类 模型 训练 方法 装置 | ||
本发明公开了一种基于无标注样本数据的目标分类模型训练方法及装置。其中,该方法包括:基于第一分类模型对样本数据集中的无标注样本集进行标注,以得到伪标签样本集,其中,第一分类模型是基于有标注样本集对目标分类模型训练得到的;根据多模态匹配模型以及伪标签样本集筛除样本数据集中的离群样本,以得到非离群样本集,其中,多模态匹配模型是基于有标注样本集训练得到的;基于非离群样本集对目标分类模型进行训练,直至模型收敛。本发明解决了由于相关技术中半监督学习中有标注数据的稀缺以及离群样本检测准确性差,而导致基于开集半监督学习的模型训练难度大的技术问题。
技术领域
本发明涉及神经网络技术领域,具体而言,涉及一种基于无标注样本数据的目标分类模型训练方法及装置。
背景技术
深度学习方法已在许多计算机视觉任务中取得了很大的成功,但其需要巨量的标注数据,制约着深度学习的广泛应用。当只有有限的标注样本可用时,半监督学习方法可以利用大量的无标注数据来提高深度神经网络的性能。大多数现有的半监督学习方法都假定有标注数据和无标注数据共享相同的类别空间。
现有技术中,需要繁琐的工作来清洗无标注数据。近年来,研究人员开始研究一个更具挑战性的半监督学习场景——开集的半监督学习,其所使用的无标注数据中包含不属于有标注数据类别的离群样本。但是,无标注数据中包含离群样本会严重影响半监督学习方法的性能。虽然已有各种各样的离群样本检测方法,但它们通常需要大量带有类别标签的分布内样本。
然而,由于半监督学习中有标注数据的稀缺性,现有的离群样本检测方法无法达到令人满意的性能,因此不适合在开集的半监督学习问题中使用。
发明内容
本发明实施例提供了一种基于无标注样本数据的目标分类模型训练方法及装置,以至少解决由于相关技术中半监督学习中有标注数据的稀缺以及离群样本检测准确性差,而导致基于开集半监督学习的模型训练难度大的技术问题。
根据本发明实施例的一个方面,提供了一种基于无标注样本的目标分类模型训练方法,包括:基于第一分类模型对样本数据集中的无标注样本集进行标注,以得到伪标签样本集,其中,所述第一分类模型是基于有标注样本集对目标分类模型训练得到的;根据多模态匹配模型以及伪标签样本集筛除所述样本数据集中的离群样本,以得到非离群样本集,其中,所述多模态匹配模型是基于所述有标注样本集训练得到的;基于所述非离群样本集对所述目标分类模型进行训练,直至模型收敛。
进一步地,基于第一分类模型对所述样本数据集中的无标注样本集进行标注,包括:根据所述第一分类模型对所述无标注样本集中的多个无标注样本进行预测,以得到所述多个无标注样本对应的多个伪标签;基于所述多个伪标签对应对所述多个无标注样本进行标注,以得到所述伪标签样本集。
进一步地,根据多模态匹配模型以及伪标签样本集筛除所述样本数据集中的离群样本,包括:根据多模态匹配模型以及伪标签样本集确定所述样本数据集中的离群样本;剔除所述样本数据集中的所述离群样本。
进一步地,根据多模态匹配模型以及伪标签样本集确定所述样本数据集中的离群样本,包括:将所述伪标签样本集中的伪标签样本的伪标签对应的标签特征向量,以及所述伪标签样本的图像特征向量,输入至所述多模态匹配模型;若根据所述多模态匹配模型确定所述标签特征向量以及所述图像特征向量不匹配,则确定所述伪标签样本对应的无标注样本为所述离群样本;反之,则确定所述伪标签样本对应的无标注样本为非离群样本。
进一步地,所述目标分类模型包括图像分类模型,所述图像分类模型包括骨干网络以及分类器,其中,所述基于所述非离群样本集对所述图像分类模型进行训练,直至模型收敛,包括:基于所述非离群样本集所述图像分类模型进行训练;以及,基于旋转样本集对图像旋转模型进行训练,其中,所述旋转样本集是根据所述样本数据集得到,所述图像旋转模型包括所述骨干网络以及旋转分类器。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京三快在线科技有限公司;中山大学,未经北京三快在线科技有限公司;中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111591966.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:双环路锁相环及其电荷泵
- 下一篇:一种快速泄压气垫床及其控制方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置