[发明专利]一种物体属性识别模型的生成方法、存储介质及电子设备有效
| 申请号: | 201910673879.9 | 申请日: | 2019-07-23 |
| 公开(公告)号: | CN110532874B | 公开(公告)日: | 2022-11-11 |
| 发明(设计)人: | 黄惠;郑倩;吴伟锴 | 申请(专利权)人: | 深圳大学 |
| 主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V10/774;G06V10/764;G06V10/82;G06N3/04;G06N3/08 |
| 代理公司: | 深圳市君胜知识产权代理事务所(普通合伙) 44268 | 代理人: | 王永文;刘文求 |
| 地址: | 518060 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 物体 属性 识别 模型 生成 方法 存储 介质 电子设备 | ||
本发明公开了一种物体属性识别模型的生成方法、存储介质及电子设备,所述方法包括:通过以包括动作序列以及目标物体属性标签的训练样本对预设神经网络进行训练,所述动作序列为人体与物体的交互动作序列,这样训练得到的物体属性识别模型可以从人体与物体的交互动作中识别到物体属性,所述物体属性包括且不仅限于为物体重量、形状以及软硬程度等,使得训练得到的识别模块对物体属性识别具有通用性,使用范围广的特点。
技术领域
本发明涉及计算机图形学技术领域,特别涉及一种物体属性识别模型的生成方法、存储介质及电子设备。
背景技术
随着近年来深度学习的发展,人体动作行为识别等类似的问题普遍使用神经网络来解决。目前现有的识别方法普遍为使用循环神经网络(RNN)结构来进行骨架序列识别以及采用卷积神经网络(CNN)对骨架序列提取特,这些方法的主要差异在于骨架序列的表示以及网络结构。然而现有识别方法主要是针对人的不同行为的人体静态姿态,限制了根据人体行为对物体属性的识别。
发明内容
本发明要解决的技术问题在于,针对现有技术的不足,提供一种物体属性识别模型的生成方法、存储介质及电子设备。
为了解决上述技术问题,本发明所采用的技术方案如下:
一种物体属性识别模型的生成方法,其包括:
获取训练样本集,所述训练样本集包括多组训练样本,每组训练样本包括所述训练样本集的交互动作序列以及目标物体属性标签;
将所述训练样本集中动作序列输入预设神经网络模型,并获取所述预设神经网络模型所输出的生成物体属性标签;
根据所述目标物体属性标签和所述生成物体属性标签对所述预设神经网络模型的模型参数进行修正,直至所述预设神经网络模型的训练情况满足预设条件,以得到已训练的物体属性识别模型。
所述物体属性识别模型的生成方法,其中,所述动作序列包括预设数量的骨骼序列帧,每一张骨骼序列帧包括人体骨骼数据,其中,所述人体骨骼数据为树状序列结构并以关节为节点。
所述物体属性识别模型的生成方法,其中,所述物体属性识别模型包括图卷积模块、门控循环单元模块以及全连接模块;所述将所述训练样本集中动作序列输入预设神经网络模型,并获取所述预设神经网络模型所输出的生成物体属性标签具体包括:
将所述动作序列的关节特征输入图卷积模块,通过所述图卷积模块提取用于输入门控循环单元模块的关节特征,其中,图卷积模块的输入包括关节位置和关节速度;
将用于输入门控循环单元模块的关节特征输入门控循环单元模块,通过门控循环单元模块输出在时序维度上的关节特征,其中,所述门控循环单元模块带有注意力子模块,所述注意力子模块用于获取各关节对物体属性的重要程度系数;
将所述权重系数以及关节特征输入所述全连接模块,通过所述全连接模块输出所述动作序列对应的生成物体属性标签。
所述物体属性识别模型的生成方法,其中,所述图卷积层输出的关节特征的表达式为:
其中,xt,i为输入图卷积层的第i各关节的关节特征,j为i的父节点的索引,t为人体骨骼数据帧的帧序号,Wg和b为图卷积层的权重系数。
所述物体属性识别模型的生成方法,其中,所述重要程度系数的计算公式为:
其中,Wha,Wxa,ba为循环神经网络的网络参数,为输入门控循环单元模块的第i各关节的关节特征,Ht-1为循环神经网络的隐含状态,t,t-1为人体骨骼数据帧的帧序号。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳大学,未经深圳大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910673879.9/2.html,转载请声明来源钻瓜专利网。





