[发明专利]一种移动端轻量化2D人体姿态估计模型在审
申请号: | 202211088071.2 | 申请日: | 2022-09-07 |
公开(公告)号: | CN116152852A | 公开(公告)日: | 2023-05-23 |
发明(设计)人: | 唐光聪;韩潼瑜;黄玉阔;程文锋 | 申请(专利权)人: | 功夫链(上海)体育文化发展有限公司 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/82;G06N3/08 |
代理公司: | 大连大工智讯专利代理事务所(特殊普通合伙) 21244 | 代理人: | 梁左秋 |
地址: | 200040 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 移动 量化 人体 姿态 估计 模型 | ||
1.一种移动端轻量化2D人体姿态估计模型,其特征在于,所述移动端轻量化2D人体姿态估计模型包括:
在残差网络的基础上,调整各阶段的瓶颈层的数量,使用调整后的模型对图像数据进行下采样;
调整瓶颈层结构,将常规卷积用深度可分离卷积代替;所述深度可分离卷积包括一个深度卷积和逐点卷积;
对调整后的模型使用不需参数训练的插值算子代替反卷积算子;
输入适合人体的身高比例的图像,且腿部使用空洞卷积来扩大感受空间;
上采样过程中,深度可分离卷积和常规卷积交叉使用,并使用上采样和下采样相同尺寸的特征图相加来增强特征信息;
多次使用深度可分离卷积和1×N/N×1卷积核卷积来代替N×N卷积,以减少模型参数且保持准确率稳定;N为大于等于1的常数。
2.根据权利要求1所述的移动端轻量化2D人体姿态估计模型,其特征在于,所述调整各阶段的瓶颈层的数量,包括:
调整五个阶段的瓶颈层的数量;所述五个阶段分别为:Stage0、Stage1、Stage2、Stage3、Stage4;
Stage1、Stage2、Stage3、Stage4的瓶颈层的数量依次由残差网络的3、4、6、3调整为3、5、12、3。
3.根据权利要求2所述的移动端轻量化2D人体姿态估计模型,其特征在于,所述使用调整后的模型对图像数据进行下采样的过程包括:
Stage0:第一步,设置常规卷积的卷积核为7×7,卷积层输出的通道数为64,卷积的步长为2;第二步,设置最大池化层的卷积核为3×3,卷积层输出的通道数为64,卷积的步长为2;
Stage1:第一至第三步,均设置瓶颈层的卷积层输出的通道数为64,卷积的步长为1;
Stage2:第一步,设置瓶颈层的卷积层输出的通道数为128,卷积的步长为2;第二至第五步,设置瓶颈层的卷积层输出的通道数为128,卷积的步长为1;
Stage3:第一、二步,设置瓶颈层的卷积层输出的通道数为256,卷积的步长为2;第三至第七步,均设置瓶颈层的卷积层输出的通道数为256,卷积的步长为1;第八步,设置瓶颈层的卷积层输出的通道数为256,卷积的步长为2;第九至第十二步,均设置瓶颈层的卷积层输出的通道数为256,卷积的步长为1;
Stage4:第一至第三步,均设置瓶颈层的卷积层输出的通道数为512,卷积的步长为1。
4.根据权利要求1所述的移动端轻量化2D人体姿态估计模型,其特征在于,训练模型参数后,使用验证数据集来评估模型,使用测试数据集来测试模型,将最终训练的模型先转化为onnx模型,再转换为tnn模型,在移动端部署。
5.根据权利要求1所述的移动端轻量化2D人体姿态估计模型,其特征在于,根据所述模型求出热度图后,根据所述热度图求出人体关键点,并根据所述人体关键点关系构建出人体骨骼图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于功夫链(上海)体育文化发展有限公司,未经功夫链(上海)体育文化发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211088071.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用于干燥后的茶膏脱模成型装置
- 下一篇:一种柿染蜡画工艺