[发明专利]一种防护过程引导系统及机器人在审
| 申请号: | 202110628419.1 | 申请日: | 2021-06-04 |
| 公开(公告)号: | CN114155946A | 公开(公告)日: | 2022-03-08 |
| 发明(设计)人: | 刘阳;许昂驰;胡建芳;郑伟诗;刘子锋;崇雨田;陈华丽;黎婉斌;周晓梅;李烁 | 申请(专利权)人: | 中山大学;中山大学附属第三医院(中山大学肝脏病医院) |
| 主分类号: | G16H40/60 | 分类号: | G16H40/60;G06V40/20;G10L15/22;G06N3/04;G06N3/08;G08B3/10;G08B21/24 |
| 代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 麦小婵;郝传鑫 |
| 地址: | 510275 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 防护 过程 引导 系统 机器人 | ||
1.一种防护过程引导系统,其特征在于,包括:
语音接收模块,用于接收待引导对象的第一语音指令和第二语音指令;其中,所述第一语音指令用于启动引导流程,所述第二语音指令用于选择穿防护用具场景或者脱防护用具场景;
图像获取模块,用于获取所述待引导对象穿防护用具或者脱防护用具的动作图像;
界面显示模块,用于显示所述待引导对象选择的穿防护用具场景或者脱防护用具场景的完整标准动作流程、所述待引导对象当前阶段需要进行的标准动作和所述待引导对象下一阶段需要进行的标准动作;
动作识别模块,用于将所述动作图像输入当前的识别模型中,判断所述待引导对象的动作是否为当前阶段需要进行的标准动作,并在所述待引导对象的动作为当前阶段需要进行的标准动作时,通过下一识别模型识别下一阶段需要进行的标准动作,直至所述待引导对象完成所有的标准动作。
2.根据权利要求1所述的防护过程引导系统,其特征在于,所述防护过程引导系统还包括语音播放模块,用于在所述待引导对象的动作为当前阶段需要进行的标准动作时,播放第一提示语音;以及
用于在所述待引导对象的动作不为当前阶段需要进行的标准动作时,播放第二提示语音。
3.根据权利要求2所述的防护过程引导系统,其特征在于,所述界面显示模块还用于播放与所述待引导对象当前阶段需要进行的动作对应的教学视频和教学文字;
所述语音播放模块还用于播放与所述教学文字对应的教学语音。
4.根据权利要求1所述的防护过程引导系统,其特征在于,所述界面显示模块还用于显示所述动作图像;其中,对于不同的动作图像,采用限位框将部分图像框出,表示动作的识别必须在所述限位框内进行。
5.根据权利要求4所述的防护过程引导系统,其特征在于,所述界面显示模块还用于显示当前的识别模型的识别结果图像;
其中,所述识别结果图像具体通过如下步骤获取:
获取识别模型的最后一个卷积层中的每一个神经元的权重;
将识别模型的最后一个卷积层中的每一个神经元的权重与对应的神经元相乘,并将所有的乘积相加;
通过ReLU函数对相加得到的值进行处理得到所述识别结果图像。
6.根据权利要求5所述的防护过程引导系统,其特征在于,识别模型的最后一个卷积层中的每一个神经元的权重的计算公式如下:
其中,为第k个神经元在类别c下的权重值,Z为像素值的个数,yc为类别c的分类分数,为第k个神经元的第i行第j个像素值;
识别模型的最后一个卷积层中的每一个神经元的权重与对应的神经元相乘并将所有的乘积相加的计算公式如下:
其中,αc为相加得到的值,Ak为第k个神经元。
7.根据权利要求1所述的防护过程引导系统,其特征在于,在所述完整动作流程中,所述待引导对象已完成的动作采用第一标识进行标记,所述待引导对象正在进行的动作采用第二标识进行标记,所述待引导对象未完成的动作采用第三标识进行标记。
8.根据权利要求1所述的防护过程引导系统,其特征在于,所述语音接收模块还用于接收所述待引导对象的第三语音指令和第四语音指令;其中,所述第三语音指令用于将当前的识别模型切换到下一识别模型,所述第四语音指令用于将当前的识别模型切换到上一识别模型。
9.一种防护过程引导机器人,其特征在于,所述防护过程引导机器人包括如上述权利要求1至8任一项所述的防护过程引导系统。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中山大学;中山大学附属第三医院(中山大学肝脏病医院),未经中山大学;中山大学附属第三医院(中山大学肝脏病医院)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110628419.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种多功能金属切割机
- 下一篇:一种产酶溶杆菌及其应用





