[发明专利]一种结合对比学习的少样本图像识别方法在审

专利信息
申请号: 202111365133.5 申请日: 2021-11-17
公开(公告)号: CN114022754A 公开(公告)日: 2022-02-08
发明(设计)人: 王青;张小雨;叶广智;吴贺丰 申请(专利权)人: 中山大学
主分类号: G06V20/00 分类号: G06V20/00;G06V10/764;G06V10/774;G06K9/62;G06N3/08
代理公司: 广州粤高专利商标代理有限公司 44102 代理人: 禹小明
地址: 510275 广东*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 结合 对比 学习 样本 图像 识别 方法
【权利要求书】:

1.一种结合对比学习的少样本图像识别方法,其特征在于:包括以下步骤:

S1.给定标注的数据集和未标注的数据集,将所述标注的数据集按类别划分为基础类数据集和少样本类数据集;

S2.通过所述的未标注的数据集和基础类数据集训练MOCO模型,得到受预训练的MOCO模型;

S3.通过对比学习框架对所述受预训练的MOCO模型进行进一步微调训练;

S4.通过所述MOCO模型对所述的少样本类数据集中的目标进行分类识别。

2.根据权利要求1所述的结合对比学习的少样本图像识别方法,其特征在于:S1中所述的基础类数据集和少样本类数据集不相交,即其中Cbase为基础类数据集,Cnovel为少样本类数据集,每个所述的少样本类数据有n个训练样本,n<10。

3.根据权利要求1所述的结合对比学习的少样本图像识别方法,其特征在于:步骤S2中,所述MOCO模型为自监督模型,包括编码器模块、多层感知机模块、队列模块;所述的编码器模块对图像数据对应的张量进行处理,以获取特征矩阵等数据,并构建无监督学习字典数据中的“键”以检索对应数据;所述的多层感知模块用于获取图像特征;所述的队列模块通过设立队列规则,完成对字典数据的存储与维护。

4.根据权利要求4所述的结合对比学习的少样本图像识别方法,其特征在于:步骤S2,具体包括以下步骤:

S201.采集所述未标注的数据集中的图像Img;

S202.在所述编码器模块中定义编码器为编码器f,对应的参数为ω;

S203.对图像Img用编码器编码:

E=f(Img),

其中,E∈Rn

S204.得到编码后,通过一个所述的多层感知机的投影层MLP:

E′=MLP(E);

S205.所述的队列模块通过将每轮训练得到的E′在本轮训练后加入一个队列,以“先入先出”的规则进行维护,保证该队列实时性,并在每轮训练时以该队列中保存的编码作为负样本进行训练。

5.根据权利要求1所述的结合对比学习的少样本图像识别方法,其特征在于:步骤S3,具体包括以下步骤:

S301.利用对比学习来扩充少样本类数据集中的目标;

S302.将得到扩充后目标的第一编码通过多层感知机投影层MLP映射得到第二编码,并构造正样本类和负样本类;

S303.将所述的负样本类和正样本类代入对比损失函数,并通过所述的对比损失函数进一步调节所述的少样本类模型;

S304.通过分类器对扩充后的目标进行分类识别;

S305.将分类识别的结果代入分类损失函数,进一步调节所述的受预训练的MOCO模型。

6.根据权利要求6所述的结合对比学习的少样本图像识别方法,其特征在于:步骤S301,具体步骤为:对于每个类别c∈Cbase∪Cnovel,随机采样两张图像Img1,Img2,并通过数据增强对两张图像分别进行增广,得到四张属于类别c的图像两两进行配对得到6组对比学习中用于监督的正样本对。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中山大学,未经中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111365133.5/1.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top