[发明专利]基于正交匹配追踪的人体关键点检测方法、装置及介质在审
申请号: | 202111118582.X | 申请日: | 2021-09-24 |
公开(公告)号: | CN114913541A | 公开(公告)日: | 2022-08-16 |
发明(设计)人: | 田炜;谭大艺;邓振文;熊璐;黄禹尧;韩帅 | 申请(专利权)人: | 同济大学 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/44;G06V10/82;G06N3/04;G06N3/08 |
代理公司: | 上海科盛知识产权代理有限公司 31225 | 代理人: | 翁惠瑜 |
地址: | 200092 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 正交 匹配 追踪 人体 关键 检测 方法 装置 介质 | ||
1.一种基于正交匹配追踪的人体关键点检测方法,其特征在于,包括:
将包含人物的待检测图像输入训练好的目标检测器,获得单个人物的裁剪图;
设置人体关键点标注坐标;
将裁剪图缩放至设定尺寸,并输入训练好的特征编码主干网络,获得感知矩阵;
根据感知矩阵,利用正交匹配追踪算法对人体关键点标注坐标进行稀疏恢复,获取待检测图像中人物的人体关键点位置。
2.根据权利要求1所述的一种基于正交匹配追踪的人体关键点检测方法,其特征在于,所述的感知矩阵记为GM×N,表达式为
其中,gj为GM×N的第j列,gij为GM×N的第i行第j列元素,i=1,2,...,M,j=1,2,...,N,M为挑选的关键支持点数,M≥K,N为裁剪图的像素总数。
3.根据权利要求2所述的一种基于正交匹配追踪的人体关键点检测方法,其特征在于,所述的正交匹配追踪算法包括:
设置稀疏度K、初始的残差信号r0和初始的支撑集Λ0,r0={X,Y},{X,Y}为关键点标注坐标,K是人体关键点的个数;
循环K次残差更新步骤,所述的残差更新步骤包括:
1)计算与当前残差信号最相关的列向量kmax:
其中,ΛD=[1,2,...,N],rk-1为循环k-1次后的残差信号,gk为GM×N的第k列,k=1,2,...,K;
2)更新支撑集:
Λk=Λk-1∪kmax
其中,Λk和Λk-1分别为循环k次和循环k-1次后的支撑集;
3)对关键点标注坐标进行稀疏分解:
其中,qk为循环k次后的稀疏解,为当前的支撑集,p为关键点标注坐标;
4)更新残差:
获得人体关键点位置
其中,qK为循环K次后的稀疏解。
4.根据权利要求1所述的一种基于正交匹配追踪的人体关键点检测方法,其特征在于,所述的目标检测器和特征编码主干网络的训练过程包括:
分别对目标检测器和特征编码主干网络进行单独训练;
单独训练完成之后,联立对目标检测器和特征编码主干网络进行联立训练。
5.根据权利要求4所述的一种基于正交匹配追踪的人体关键点检测方法,其特征在于,单独训练特征编码主干网络的过程中,对特征编码主干网络的输入进行数据增广。
6.根据权利要求5所述的一种基于正交匹配追踪的人体关键点检测方法,其特征在于,所述的数据增广过程包括随机翻转、随机缩放和随机旋转中的一种或多种。
7.根据权利要求1所述的一种基于正交匹配追踪的人体关键点检测方法,其特征在于,所述的目标检测器为卷积神经网络。
8.根据权利要求7所述的一种基于正交匹配追踪的人体关键点检测方法,其特征在于,所述的卷积神经网络为FasterRCNN。
9.一种基于正交匹配追踪的人体关键点检测装置,其特征在于,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器调用所述程序指令能够执行如权利要求1至8任一所述的检测方法。
10.一种计算机可读存储介质,其特征在于,包括计算机程序,所述计算机程序能够被处理器执行以实现如权利要求1-8任一所述的检测方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于同济大学,未经同济大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111118582.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:防水/拒水组合物
- 下一篇:一种制造钇铝石榴石铁氧体材料的方法