[发明专利]一种拟人化虚拟助手注视方向控制方法

说明书

本发明公开了一种拟人化虚拟助手注视方向控制方法，该控制方法通过人脸识别确定虚拟助手注视目标集；根据人脸识别图像尺寸、说话人声源方位，确定多目标情况下面向不同应用场景的虚拟助手注视目标；利用虚拟助手当前注视方向与注视目标之间的方位夹角控制虚拟助手身体、头部或眼睛进行转动，达到控制拟人化虚拟助手注视方向的目的。本发明从人们日常面对面语言交流的心理、认知需求出发，将人脸识别与声源定位技术相结合，实现虚拟助手注视方向控制，适用于拟人化虚拟助手参与的单人咨询或多人会议等应用场景，对增强客服机器人在语音应答过程中的亲和力、提高用户体验具有促进作用。

技术领域

本发明涉及人机交互技术领域，尤其涉及一种拟人化虚拟助手注视方向控制方法。

背景技术

随着社会发展，客服机器人开始进入各行各业，提供业务咨询服务。与传统人工5*8小时业务咨询服务模式相比，客服机器人可以提供7*24小时全天候服务，服务质量和服务效率都有显著提高。

目前，客服机器人主要表现为：

(1)语音助手：具有语音应答功能。然而，用户在业务咨询过程中只闻其声、未见其人，缺乏亲近感，适用于日常聊天或简单业务咨询；

(2)拟人化虚拟助手：除语音应答功能外，还具有微笑、眨眼、唇动等简单面部表情特征。但是，拟人化虚拟助手的注视方向往往固定不变，不符合人们日常面对面语言交流的认知习惯，用户体验不好。

心理学研究表明，眼睛注视方向包含直观且丰富的认知线索，是传递非语言信息的一种重要方式。通过观察他人的眼睛注视方向，可以捕捉他人当下的注意焦点，对人们日常交流具有重要意义。因此，本发明从人们日常面对面语言交流的心理、认知需求出发，提供了一种拟人化虚拟助手注视方向控制方法，对增强客服机器人在语音应答过程中的亲和力、提高用户体验具有促进作用。

因此，现有技术需要进一步改进和完善。

发明内容

本发明的目的在于克服现有技术的不足，提供一种能够提高用户体验的拟人化虚拟助手注视方向控制方法。

本发明从人们日常面对面语言交流的心理、认知需求出发，将人脸识别与声源定位技术相结合，实现虚拟助手注视方向控制，适用于拟人化虚拟助手参与的单人咨询或多人会议等应用场景，对增强客服机器人在语音应答过程中的亲和力、提高用户体验具有促进作用。

本发明的目的通过下述技术方案实现：

一种拟人化虚拟助手注视方向控制方法，所述注视方向由水平注视方向和竖直注视方向构成，通过虚拟助手的眼睛、头部和身体转动实现；所述眼睛转动是指虚拟助手眼睛在水平方向的转动，所述头部转动是指虚拟助手头部在水平和竖直两个方向的转动，所述身体转动是指虚拟助手躯干在水平方向的转动，该控制方法具体包括如下步骤：

步骤S1：通过人脸识别确定虚拟助手注视目标集；

步骤S2：确定注视目标；

进一步的，所述步骤S2还包括如下步骤：

步骤S21：当步骤S1中所述目标集有唯一目标时，将该目标作为虚拟助手注视目标；

步骤S22：当步骤S1中所述目标集有多个目标时，根据人脸识别图像尺寸、说话人音源方位，确定多目标情况下虚拟助手注视目标；所述人脸识别图像尺寸，是指人脸识别框内的像素个数。

更进一步的，所述步骤S22还包括如下步骤：

步骤S221：当未检测到用户语音信号时，比较人脸识别图像尺寸，将图像尺寸最大的人脸作为虚拟助手注视目标；

步骤S222：当检测到用户语音信号时，根据语音信号的音源方位，确定多目标情况下虚拟助手注视目标。