[发明专利]信息交互方法、装置、设备以及存储介质

权利要求书

1.一种信息交互方法，包括：

响应于满足预设的图像采集条件，采集目标对象的多张图像；

对所述多张图像进行分析，确定与所述目标对象对应的指令；

根据所述指令，输出交互信息。

2.根据权利要求1所述的方法，其中，所述方法还包括：

监测以下至少一项是否满足：自上次采集所述目标对象的图像经过了预设时长、接收到图像采集指令；

响应于以上至少一项满足，确定满足所述预设的图像采集条件。

3.根据权利要求1所述的方法，其中，所述对所述多张图像进行分析，确定与所述目标对象对应的指令，包括：

对所述多张图像进行分类，并基于分类结果确定所述目标对象的状态；

响应于确定所述目标对象的状态满足预设的报警条件，确定报警指令；

所述根据所述指令，输出交互信息，包括：

根据所述报警指令，将所述多张图像中的至少一张发送给目标终端。

4.根据权利要求1所述的方法，其中，所述响应于满足预设的图像采集条件，采集目标对象的多张图像，包括：

响应于接收到语音指令，对所述语音指令进行意图检测以及槽位填充，确定用户意图以及槽位标签；

根据所述用户意图以及所述槽位标签，确定目标对象以及采集所述目标对象的多张图像。

5.根据权利要求4所述的方法，其中，所述对所述语音指令进行意图检测以及槽位填充，确定用户意图以及槽位标签，包括：

对所述语音指令进行语音识别，得到语音文本；

对所述语音文本进行意图检测以及槽位填充，确定用户意图以及槽位标签。

6.根据权利要求5所述的方法，其中，所述对所述语音指令进行语音识别，得到语音文本，包括：

对所述语音指令进行语音激活检测，确定所述语音指令的起始点和结束点；

对所述起始点和所述结束点之间的语音进行数字化，提取数字化后的音频的特征；

根据所提取的数字化后的音频的特征以及预先训练的向量确定模型，确定所述音频对应的向量；

对所述音频对应的向量进行解码，确定所述语音文本。

7.根据权利要求5所述的方法，其中，所述对所述语音文本进行意图检测以及槽位填充，确定用户意图以及槽位标签，包括：

对所述语音文本进行编码，确定所述语音文本对应的文本向量；

对所述文本向量进行编码，确定所述文本向量对应的意图分类向量以及多个槽位预测向量；

根据所述意图分类向量以及所述多个槽位预测向量，确定用户意图以及槽位标签。

8.根据权利要求7所述的方法，其中，所述根据所述意图分类向量以及所述多个槽位预测向量，确定用户意图以及槽位标签，包括：

对所述意图分类向量进行分类，并基于分类结果确定用户意图；

分别将所述意图分类向量与各槽位预测向量进行拼接，得到多个拼接向量；

对各拼接向量进行分类，并基于分类结果确定槽位标签。

9.根据权利要求1所述的方法，其中，所述对所述多张图像进行分析，确定与所述目标对象对应的指令，包括：

对所述多张图像进行目标检测，确定所述目标对象的位置；

根据所述目标对象的位置，确定与所述目标对象之间的距离；

根据所述目标对象的位置以及与所述目标对象之间的距离，确定操作指令；

所述根据所述指令，输出交互信息，包括：

执行所述操作指令，并输出操作结果。

10.根据权利要求9所述的方法，其中，所述执行所述操作指令，包括：

根据所处环境的信息和/或所述目标对象的类型，确定移动速度；

以所述移动速度移动。