[发明专利]用于自助一体机的无接触操控方法和装置在审
申请号: | 202110257436.9 | 申请日: | 2021-03-09 |
公开(公告)号: | CN113035196A | 公开(公告)日: | 2021-06-25 |
发明(设计)人: | 钟康;张顺;韦伟;王冬冬 | 申请(专利权)人: | 思必驰科技股份有限公司 |
主分类号: | G10L15/22 | 分类号: | G10L15/22;G06K9/00 |
代理公司: | 北京商专永信知识产权代理事务所(普通合伙) 11400 | 代理人: | 黄谦;邓婷婷 |
地址: | 215123 江苏省苏州市苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 自助 一体机 接触 操控 方法 装置 | ||
1.一种用于自助一体机的无接触操控方法,包括:
响应于获取到用户在预设范围内出现,对所述用户进行人脸检测获取所述用户的相关信息;
基于所述用户的相关信息判断所述用户是否有语音交互的意图;
若所述用户有语音交互的意图,对所述用户进行嘴唇关键点检测,判断所述用户的嘴唇是否有遮挡物;
若有遮挡物,获取所述用户的语音信号并对所述语音信号进行识别处理;
基于语音信号的识别处理结果,将与所述语音信号的识别处理结果对应的对话管理结果输出。
2.根据权利要求1所述的方法,其中,在所述判断所述用户的嘴唇是否有遮挡物之后,所述方法还包括:
若所述用户的嘴唇没有遮挡物,获取所述用户的语音信号并对所述语音信号进行识别处理和语音识别语音对话管理。
3.根据权利要求2所述的方法,其中,在所述判断所述用户的嘴唇是否有遮挡物之后,所述方法还包括:
若判断所述用户的嘴唇没有遮挡物且没有检测到所述用户的嘴唇,重新获取所述用户的相关信息。
4.根据权利要求1所述的方法,其中,所述响应于获取到用户在预设范围内出现,包括:
响应于获取到空间感应类传感器检测的数据信息,判断在预设范围内是否有用户出现;
若所述预设范围内有用户出现,对所述用户进行人脸检测获取所述用户的相关信息。
5.根据权利要求4所述的方法,其中,所述空间感应类传感器持续检测周边环境。
6.根据权利要求5所述的方法,其中,所述用户的相关信息包括:人脸朝向、视线方向和嘴唇动作。
7.根据权利要求1-6中任一项所述的方法,其中,在所述判断所述用户的嘴唇是否有遮挡物之后,所述方法还包括:
若判断所述用户的嘴唇没有遮挡物,基于预设信息判断是否提醒所述用户佩戴口罩。
8.一种用于自助一体机的无接触操控装置,包括:
检测获取程序模块,配置为响应于获取到用户在预设范围内出现,对所述用户进行人脸检测获取所述用户的相关信息;
判断程序模块,配置为基于所述用户的相关信息判断所述用户是否有语音交互的意图;
检测判断程序模块,配置为若所述用户有语音交互的意图,对所述用户进行嘴唇关键点检测,判断所述用户的嘴唇是否有遮挡物;
获取处理程序模块,配置为若有遮挡物,获取所述用户的语音信号并对所述语音信号进行识别处理;
输出程序模块,配置为基于语音信号的识别处理结果,将与所述语音信号的识别处理结果对应的对话管理结果输出。
9.一种电子设备,其包括:至少一个处理器,以及与所述至少一个处理器通信连接的存储器,其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至7任一项所述方法的步骤。
10.一种存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现权利要求1至7任一项所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于思必驰科技股份有限公司,未经思必驰科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110257436.9/1.html,转载请声明来源钻瓜专利网。