[发明专利]一种手部骨节定位方法和装置在审
| 申请号: | 202210004222.5 | 申请日: | 2022-01-04 |
| 公开(公告)号: | CN114373191A | 公开(公告)日: | 2022-04-19 |
| 发明(设计)人: | 张夏杰 | 申请(专利权)人: | 北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司 |
| 主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/25;G06V10/82;G06N3/04 |
| 代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 张一军;王安娜 |
| 地址: | 100176 北京市北京经济技术*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 骨节 定位 方法 装置 | ||
1.一种手部骨节定位方法,其特征在于,包括:
在上一帧图像的手部骨节热力图中定位出检测框;其中,所述检测框的中心为中指根部所在区域内的任意位置;
根据所述检测框在下一帧图像中裁剪出手部图像;
将所述手部图像输入至预先训练的手部骨节检测模型中,从而输出手部骨节热力图。
2.根据权利要求1所述的方法,其特征在于,所述中指根部所在区域为以所述中指根部为中心、以所述中指根部到食指根部的距离为半径形成的区域;或者,
所述中指根部所在区域为以所述中指根部为中心、以所述中指根部到无名指根部的距离为半径所形成的区域。
3.根据权利要求2所述的方法,其特征在于,所述中指根部所在区域为所述中指根部。
4.根据权利要求2所述的方法,其特征在于,所述检测框的大小根据手部骨节的外接矩形框而确定。
5.根据权利要求4所述的方法,其特征在于,所述检测框的边长为手部骨节的外接矩形框的边长的1.2-2倍;其中,所述外接矩形框的边长为所述外接矩形框的高度或者宽度中的最大值。
6.根据权利要求1-5中任一项所述的方法,其特征在于,在上一帧图像的手部骨节热力图中定位出检测框之前,还包括:
根据原始图像生成原始样本图像;
对所述原始图像进行随机扰动,从而生成扰动样本图像;
分别将所述原始样本图像和所述扰动样本图像转换成对应的手部骨节热力图;
将所述原始样本图像和所述扰动样本图像输入到模型中,并以所述原始样本图像对应的手部骨节热力图和所述扰动样本图像对应的手部骨节热力图作为输出,训练所述模型,从而得到手部骨节检测模型。
7.根据权利要求6所述的方法,其特征在于,根据原始图像生成原始样本图像,包括:
在原始图像中标记出手部骨节和检测框;
根据所述检测框在所述原始图像中裁剪出原始样本图像。
8.根据权利要求7所述的方法,其特征在于,对所述原始图像进行随机扰动,从而生成扰动样本图像,包括:
对所述检测框的中心进行随机扰动,从而在所述原始图像中标记出扰动框;
根据所述扰动框在所述原始图像中裁剪出扰动样本图像。
9.根据权利要求8所述的方法,其特征在于,在竖直方向上,所述扰动框相对于所述检测框的位移量为手部骨节的外接矩形框的边长的0.05-0.5倍;在水平方向上,所述扰动框相对于所述检测框的位移量为手部骨节的外接矩形框的边长的0.05-0.5倍。
10.一种手部骨节定位装置,其特征在于,包括:
定位模块,用于在上一帧图像的手部骨节热力图中定位出检测框;其中,所述检测框的中心为中指根部所在区域内的任意位置;
裁剪模块,用于根据所述检测框在下一帧图像中裁剪出手部图像;
检测模块,用于将所述手部图像输入至预先训练的手部骨节检测模型中,从而输出手部骨节热力图。
11.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,所述一个或多个处理器实现如权利要求1-9中任一所述的方法。
12.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-9中任一所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司,未经北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210004222.5/1.html,转载请声明来源钻瓜专利网。





