[发明专利]手势识别方法及系统、计算机设备及存储介质有效
申请号: | 201910269829.4 | 申请日: | 2019-04-04 |
公开(公告)号: | CN109977906B | 公开(公告)日: | 2021-06-01 |
发明(设计)人: | 董健;张军;张明;王禹 | 申请(专利权)人: | 睿魔智能科技(深圳)有限公司;东莞松山湖国际机器人研究院有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 广州粤高专利商标代理有限公司 44102 | 代理人: | 罗晓林 |
地址: | 518000 广东省深圳市前海*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 手势 识别 方法 系统 计算机 设备 存储 介质 | ||
1.一种手势识别方法,其特征在于,包括如下步骤:
A、实时检测拍摄影像中的人脸和手势,得到拍摄影像中当前帧图片中所有的人脸边界框和手势边界框;
B、根据所述人脸边界框的位置信息更新人脸轨迹列表;
C、若所述人脸轨迹列表中存在有效人脸轨迹,根据预设绑定规则将当前帧图片的手势边界框与有效人脸轨迹的当前帧图片的人脸边界框进行绑定;
其中,所述步骤C中根据预设绑定规则将当前帧图片的手势边界框与有效人脸轨迹的当前帧图片的人脸边界框进行绑定的方法包括:
c1、分别计算有效人脸轨迹的当前帧图片中的各人脸边界框与各手势边界框之间的归一化距离l,其中,SH为手势边界框的面积,SF为人脸边界框的面积,d为手势边界框的中心点与人脸边界框的中心点的距离;
c2、根据计算的归一化距离l生成各人脸边界框与各手势边界框之间的距离关联表;
c3、在距离关联表中按人脸ID从小到大依次对人脸ID对应的人脸边界框的归一化距离l进行升序排列,以得到每个人脸ID对应的人脸边界框的最小的归一化距离l,若所述最小的归一化距离l小于等于预置距离,则将其对应的手势边界框与对应的人脸边界框进行绑定;其中若某一手势边界框和人脸边界框已绑定,则该手势边界框和人脸边界框均不再参与后续的绑定;
其中,所述人脸轨迹列表由不同的人脸轨迹组成,所述人脸轨迹为一具有同一人脸ID的人脸边界框的集合,每一人脸轨迹对应一人脸ID;
D、识别当前帧图片中与有效人脸轨迹匹配的手势边界框的手势类别,获取所述有效人脸轨迹中的有效手势类别。
2.根据权利要求1所述的手势识别方法,其特征在于,所述步骤B、根据所述人脸边界框的位置信息更新人脸轨迹列表的方法包括如下步骤:
步骤b1、根据人脸边界框的坐标信息和面积信息分别判断当前帧图片的人脸边界框与人脸轨迹列表中的各人脸轨迹的人脸边界框是否均不匹配,若否,执行步骤b3;若是,执行步骤b2;
步骤b2、给当前帧图片中的人脸边界框分配一新人脸ID,根据当前帧图片的人脸边界框的位置信息及对应的新人脸ID在人脸轨迹列表中创建一新的人脸轨迹;
步骤b3、将当前帧图片的人脸边界框的位置信息作为对应匹配的人脸轨迹在最新帧图片中的人脸边界框的位置信息更新于人脸轨迹列表中;
其中,当前帧图片中的人脸边界框与人脸轨迹列表中的人脸轨迹的人脸边界框的匹配条件为当前帧图片中的人脸边界框与人脸轨迹在当前帧图片的前N帧图片中的某一帧图片中的人脸边界框两者交集区域的面积与两者并集区域的面积之比大于等于第一预置阈值;
其中,所述人脸轨迹列表由不同的人脸轨迹组成,所述人脸轨迹为一具有同一人脸ID的人脸边界框的集合,每一人脸轨迹对应一人脸ID;所述人脸边界框的位置信息包括人脸边界框的坐标信息和面积信息。
3.根据权利要求2所述的手势识别方法,其特征在于,所述步骤b1、根据人脸边界框的坐标信息和面积信息分别判断当前帧图片的人脸边界框与人脸轨迹列表中的各人脸轨迹的人脸边界框是否均不匹配,若否,执行步骤b3;若是,执行步骤b2的方法包括:
根据人脸边界框的位置信息和面积判断当前帧图片中的人脸边界框与人脸轨迹列表中其中一人脸轨迹的最临近的一帧图片中的人脸边界框是否匹配,若否,沿该人脸轨迹往前回溯一帧图片,继续进行匹配判断,直到回溯N帧图片为止;若当前图片帧的人脸边界框与该人脸轨迹回溯的N帧图片中的人脸边界框均不匹配,则切换到人脸轨迹列表中的另一人脸轨迹进行匹配判断;当判断出当前帧图片的人脸边界框与人脸轨迹列表中的一人脸轨迹的某一帧图片中的人脸边界框匹配成功时,则执行步骤b3;当判断出当前帧图片的人脸边界框与人脸轨迹列表中各个人脸轨迹的人脸边界框均不匹配时,执行步骤b2。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于睿魔智能科技(深圳)有限公司;东莞松山湖国际机器人研究院有限公司,未经睿魔智能科技(深圳)有限公司;东莞松山湖国际机器人研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910269829.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于处理眼底图像的方法和装置
- 下一篇:基于票据识别的费用报销方法及其系统