[发明专利]用于实现体态对比的方法及相关设备在审
申请号: | 202111423174.5 | 申请日: | 2021-11-26 |
公开(公告)号: | CN114119550A | 公开(公告)日: | 2022-03-01 |
发明(设计)人: | 马珵;沈艳;陈铁砺;夏友祥 | 申请(专利权)人: | 京东方科技集团股份有限公司 |
主分类号: | G06T7/00 | 分类号: | G06T7/00;G06T7/73;G06T3/00;G06T7/13;G06T17/00;G06V40/16;G06V40/20;G06V10/22;G06V10/764;G06K9/62;G06N20/10;G10L15/22 |
代理公司: | 北京风雅颂专利代理有限公司 11403 | 代理人: | 李莎 |
地址: | 100015 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 实现 体态 对比 方法 相关 设备 | ||
1.一种用于实现体态比对的方法,包括:
确定用户的身份信息;
根据所述用户的身份信息,获取所述用户对应的模版身材模型;
获取包括所述用户的全身图像的第一图像数据;
根据所述第一图像数据,处理得到所述用户的关节位置信息;
根据所述关节位置信息调整所述模版身材模型;以及
对比展示所述第一图像数据和调整后的模版身材模型。
2.如权利要求1所述的方法,其中,根据所述第一图像数据,处理得到所述用户的关节位置信息,包括:
根据所述第一图像数据,处理得到所述用户的人体图像;
根据所述用户的人体图像,构建所述用户的人体骨架模型;以及
从所述人体骨架模型中提取关节向量的时空特征作为所述用户的关节位置信息。
3.如权利要求2所述的方法,其中,根据所述第一图像数据,处理得到所述用户的人体图像,包括:
将所述第一图像数据转换为灰度图;
使用Sobel边缘检测算子对所述灰度图进行处理,得到边缘检测图像;
使用局部二值模式方法检测所述边缘检测图像中的人体轮廓;
使用线性支持向量机分类器排除所述人体轮廓中预定比例的区域,得到所述人体轮廓的部分区域;以及
使用非线性支持向量机分类器筛选所述人体轮廓的部分区域,得到所述用户的人体图像。
4.如权利要求2所述的方法,其中,根据所述用户的人体图像,构建所述用户的人体骨架模型,包括:
使用OpenPose得到所述用户的人体图像中关节点的二维坐标信息;
使用前后帧关联算法对所述关节点的二维坐标信息进行补全,得到补全后的关节点的二维坐标信息;以及
根据所述补全后的关节点的二维坐标信息,构建所述人体骨架模型。
5.如权利要求2所述的方法,其中,所述关节向量的时空特征包括方向余弦特征、夹角余弦特征和角度变化率特征。
6.如权利要求1所述的方法,还包括:
接收所述用户的动作模版比对指令;
根据所述动作模版比对指令,确定对应的动作模版;
获取所述动作模版对应的关节运动信息;以及
根据所述动作模版对应的关节运动信息调整所述用户的身材模型并展示。
7.如权利要求1或6所述的方法,还包括:
接收所述用户的对展示画面进行调整的第一语音指令;以及
根据所述第一语音指令,对展示画面进行调整。
8.如权利要求1所述的方法,还包括:
接收所述用户的自动跟随指令;
根据所述自动跟随指令,连续采集预设时间段内的包括所述用户的全身图像的第二图像数据;
基于所述第二图像数据,检测得到所述用户的关节运动信息;
将所述用户的关节运动信息输入到最邻近结点算法分类器中进行分类,并输出预测模版动作;以及
根据所述预测模版动作,结合所述用户的身材模型,生成动作模版并展示。
9.如权利要求8所述的方法,其中,输出预测模版动作,进一步包括:
响应于所述用户的关节运动信息与所述预测模版动作的相似度低于预设阈值,输出错误提示信息。
10.如权利要求6、8或9所述的方法,还包括:
利用深度相机采集包括所述用户的全身图像的第三图像数据,所述第三图像数据包括深度图像和彩色图像;
基于所述深度图像和彩色图像,生成点云数据;
对所述点云数据进行去背景处理和平滑去噪处理,得到预处理后的点云数据;
利用联合双边滤波方法对所述预处理后的点云数据中的深度数据进行修补,得到修补后的点云数据;
对所述修补后的点云数据进行配准,得到配准后的点云数据;以及
使用泊松表面重建方法对所述配准后的点云数据完成表面重建并进行纹理的映射,得到所述用户的身材模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司,未经京东方科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111423174.5/1.html,转载请声明来源钻瓜专利网。