[发明专利]机器人交互方法、装置、计算机设备及可读存储介质在审
| 申请号: | 201811171864.4 | 申请日: | 2018-10-09 |
| 公开(公告)号: | CN109446303A | 公开(公告)日: | 2019-03-08 |
| 发明(设计)人: | 周海明;林绿德;庄永军 | 申请(专利权)人: | 深圳市三宝创新智能有限公司 |
| 主分类号: | G06F16/332 | 分类号: | G06F16/332;G06K9/00 |
| 代理公司: | 深圳力拓知识产权代理有限公司 44313 | 代理人: | 龚健 |
| 地址: | 518055 广东省深圳市福田区华*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 机器人 面部表情 行为动作 动态图像信息 可读存储介质 用户图像信息 机器人领域 计算机设备 情感交流 音调信息 语音信息 拟人化 人交互 扫描 采集 语言 分析 | ||
1.一种机器人交互方法,其特征在于,所述方法包括以下步骤:
扫描当前环境,识别出用户目标,并获取用户图像信息,所述用户图像信息包括用户的面部表情;
采集用户的语音信息,所述用户的语音信息包括用户的语言;
获取用户动态图像信息,所述用户动态图像信息包括用户的行为动作;
根据所述获取的用户的面部表情、语言以及行为动作,分析并确认用户当前的心情;
根据所述用户当前的心情,做出相应的反应。
2.根据权利要求1所述的方法,其特征在于,所述用户当前的心情包括开心、生气、吃惊、悲伤以及恐惧。
3.根据权利要求2所述的方法,其特征在于,所述根据所述用户当前的心情,做出相应的反应的步骤,具体包括:
当确认用户当前的心情为开心时,所述机器人屏幕显示愉悦的表情,并使用愉悦的语调与用户进行交流;
当确认用户当前的心情为生气时,所述机器人屏幕显示害怕的表情,并使用颤抖的语调与用户进行交流;
当确认用户当前的心情为吃惊时,所述机器人屏幕显示惊讶的表情,并使用惊讶的语调与用户进行交流;
当确认用户当前的心情为悲伤时,所述机器人屏幕显示担心的表情,并使用安慰的语调与用户进行交流;
当确认用户当前的心情为恐惧时,所述机器人屏幕显示和蔼的表情,并使用温和的语调与用户进行交流。
4.一种机器人交互装置,其特征在于,所述机器人交互装置包括:
图像信息获取单元,用于扫描当前环境,识别出用户目标,并获取用户图像信息,所述用户图像信息包括用户的面部表情;
语音信息获取单元,用于采集用户的语音信息,所述用户的语音信息包括用户的语言;
动态图像信息获取单元,用于获取用户动态图像信息,所述用户动态图像信息包括用户的行为动作;
心情分析单元,用于根据所述获取的用户的面部表情、语言以及行为动作,分析并确认用户当前的心情;
行为控制单元,用于根据所述用户当前的心情,做出相应的反应。
5.根据权利要求4所述的装置,其特征在于,所述心情分析单元包括:
面部表情分析主模块,用于提取并识别用户的面部表情,并确认用户的心情;
语言分析主模块,用于提取用户语言的音调,并确认用户的心情;以及
行为动作分析主模块,用于识别用户的姿体形态,并确认用户的心情。
6.根据权利要求5所述的装置,其特征在于,所述面部表情分析主模块包括:
面部表情提取次模块,用于提取用户的面部表情特征;以及
面部表情识别次模块,用于根据用户的面部表情特征与预设的用户面部表情暂态特征之间的差异,确认用户的心情。
7.根据权利要求4所述的装置,其特征在于,所述行为控制单元包括:
屏幕显示模块,用于根据所述用户当前的心情,显示相应的表情符号;
语音输出模块,用于根据所述用户当前的心情,确定输出的语音信息的音调;
手部动作控制模块,用于根据所述用户当前的心情,控制机器人手部执行相应的动作;以及
躯干动作控制模块,用于根据所述用户当前的心情,控制机器人行进与转向。
8.一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行权利要求1至3中任一项权利要求所述机器人交互方法的步骤。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时,使得所述处理器执行权利要求1至4中任一项权利要求所述机器人交互方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市三宝创新智能有限公司,未经深圳市三宝创新智能有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811171864.4/1.html,转载请声明来源钻瓜专利网。





