[发明专利]手势识别方法及系统、计算机设备及存储介质有效

专利信息
申请号: 201910269829.4 申请日: 2019-04-04
公开(公告)号: CN109977906B 公开(公告)日: 2021-06-01
发明(设计)人: 董健;张军;张明;王禹 申请(专利权)人: 睿魔智能科技(深圳)有限公司;东莞松山湖国际机器人研究院有限公司
主分类号: G06K9/00 分类号: G06K9/00
代理公司: 广州粤高专利商标代理有限公司 44102 代理人: 罗晓林
地址: 518000 广东省深圳市前海*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 手势 识别 方法 系统 计算机 设备 存储 介质
【权利要求书】:

1.一种手势识别方法,其特征在于,包括如下步骤:

A、实时检测拍摄影像中的人脸和手势,得到拍摄影像中当前帧图片中所有的人脸边界框和手势边界框;

B、根据所述人脸边界框的位置信息更新人脸轨迹列表;

C、若所述人脸轨迹列表中存在有效人脸轨迹,根据预设绑定规则将当前帧图片的手势边界框与有效人脸轨迹的当前帧图片的人脸边界框进行绑定;

其中,所述步骤C中根据预设绑定规则将当前帧图片的手势边界框与有效人脸轨迹的当前帧图片的人脸边界框进行绑定的方法包括:

c1、分别计算有效人脸轨迹的当前帧图片中的各人脸边界框与各手势边界框之间的归一化距离l,其中,SH为手势边界框的面积,SF为人脸边界框的面积,d为手势边界框的中心点与人脸边界框的中心点的距离;

c2、根据计算的归一化距离l生成各人脸边界框与各手势边界框之间的距离关联表;

c3、在距离关联表中按人脸ID从小到大依次对人脸ID对应的人脸边界框的归一化距离l进行升序排列,以得到每个人脸ID对应的人脸边界框的最小的归一化距离l,若所述最小的归一化距离l小于等于预置距离,则将其对应的手势边界框与对应的人脸边界框进行绑定;其中若某一手势边界框和人脸边界框已绑定,则该手势边界框和人脸边界框均不再参与后续的绑定;

其中,所述人脸轨迹列表由不同的人脸轨迹组成,所述人脸轨迹为一具有同一人脸ID的人脸边界框的集合,每一人脸轨迹对应一人脸ID;

D、识别当前帧图片中与有效人脸轨迹匹配的手势边界框的手势类别,获取所述有效人脸轨迹中的有效手势类别。

2.根据权利要求1所述的手势识别方法,其特征在于,所述步骤B、根据所述人脸边界框的位置信息更新人脸轨迹列表的方法包括如下步骤:

步骤b1、根据人脸边界框的坐标信息和面积信息分别判断当前帧图片的人脸边界框与人脸轨迹列表中的各人脸轨迹的人脸边界框是否均不匹配,若否,执行步骤b3;若是,执行步骤b2;

步骤b2、给当前帧图片中的人脸边界框分配一新人脸ID,根据当前帧图片的人脸边界框的位置信息及对应的新人脸ID在人脸轨迹列表中创建一新的人脸轨迹;

步骤b3、将当前帧图片的人脸边界框的位置信息作为对应匹配的人脸轨迹在最新帧图片中的人脸边界框的位置信息更新于人脸轨迹列表中;

其中,当前帧图片中的人脸边界框与人脸轨迹列表中的人脸轨迹的人脸边界框的匹配条件为当前帧图片中的人脸边界框与人脸轨迹在当前帧图片的前N帧图片中的某一帧图片中的人脸边界框两者交集区域的面积与两者并集区域的面积之比大于等于第一预置阈值;

其中,所述人脸轨迹列表由不同的人脸轨迹组成,所述人脸轨迹为一具有同一人脸ID的人脸边界框的集合,每一人脸轨迹对应一人脸ID;所述人脸边界框的位置信息包括人脸边界框的坐标信息和面积信息。

3.根据权利要求2所述的手势识别方法,其特征在于,所述步骤b1、根据人脸边界框的坐标信息和面积信息分别判断当前帧图片的人脸边界框与人脸轨迹列表中的各人脸轨迹的人脸边界框是否均不匹配,若否,执行步骤b3;若是,执行步骤b2的方法包括:

根据人脸边界框的位置信息和面积判断当前帧图片中的人脸边界框与人脸轨迹列表中其中一人脸轨迹的最临近的一帧图片中的人脸边界框是否匹配,若否,沿该人脸轨迹往前回溯一帧图片,继续进行匹配判断,直到回溯N帧图片为止;若当前图片帧的人脸边界框与该人脸轨迹回溯的N帧图片中的人脸边界框均不匹配,则切换到人脸轨迹列表中的另一人脸轨迹进行匹配判断;当判断出当前帧图片的人脸边界框与人脸轨迹列表中的一人脸轨迹的某一帧图片中的人脸边界框匹配成功时,则执行步骤b3;当判断出当前帧图片的人脸边界框与人脸轨迹列表中各个人脸轨迹的人脸边界框均不匹配时,执行步骤b2。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于睿魔智能科技(深圳)有限公司;东莞松山湖国际机器人研究院有限公司,未经睿魔智能科技(深圳)有限公司;东莞松山湖国际机器人研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910269829.4/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top