[发明专利]基于人工智能的回复消息生成方法、装置、服务器及介质有效
申请号: | 201910685616.X | 申请日: | 2019-07-27 |
公开(公告)号: | CN110442693B | 公开(公告)日: | 2022-02-22 |
发明(设计)人: | 何世柱;刘康;赵军;刘操;王摘星 | 申请(专利权)人: | 中国科学院自动化研究所;腾讯科技(深圳)有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F40/284 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 张所明 |
地址: | 100000 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 人工智能 回复 消息 生成 方法 装置 服务器 介质 | ||
1.一种基于人工智能的回复消息生成方法,其特征在于,所述方法包括:
获取目标用户的会话消息;
将所述会话消息输入多级编码器中,所述多级编码器包括多个级联的编码器,每个编码器与多级词汇表中包括的一级词汇表对应,每级所述词汇表包括的词汇用于表示层级相邻且层级低于所述词汇表的其他词汇表中多个词汇的类别;
根据所述多个编码器的级联关系,控制每个所述编码器分别根据每个所述编码器对应的词汇表以及上一级编码器的状态信息生成所述会话消息的编码序列;
根据多级解码器包括的多个解码器的级联关系,控制每个解码器分别根据所述多个编码器生成的编码序列、上级解码器生成的第一解码序列以及对应的编码器的状态信息生成第二解码序列,所述多个解码器与所述多个编码器一一对应;
根据所述多级解码器生成的解码序列,输出所述会话消息的回复消息。
2.根据权利要求1所述的方法,其特征在于,所述控制每个所述编码器分别根据每个所述编码器对应的词汇表以及上一级编码器的状态信息生成所述会话消息的编码序列,包括:
对于每个所述编码器,确定所述编码器对应的词汇表;
根据所述词汇表,确定所述会话消息包括的每个词汇的词向量,得到词向量序列;
根据所述词向量序列以及所述上一级编码器的状态信息生成所述会话消息的编码序列。
3.根据权利要求2所述的方法,其特征在于,所述编码器为第一级的第一编码器时,所述上一级编码器的状态信息为空;
所述根据所述词向量序列以及所述上一级编码器的状态信息生成所述会话消息的编码序列,包括:
根据零向量初始化所述第一编码器包含的第一序列模型;
将所述词向量序列输入所述第一序列模型,生成所述会话消息的编码序列。
4.根据权利要求2所述的方法,其特征在于,所述编码器为非第一级的第二编码器时,所述上一级编码器的状态信息不为空;
所述根据所述词向量序列以及所述上一级编码器的状态信息生成所述会话消息的编码序列,包括:
获取上一级编码器的状态信息,根据所述状态信息初始化所述第二编码器包含的第二序列模型;
将所述词向量序列输入所述第二序列模型,生成所述会话消息的编码序列。
5.根据权利要求1所述的方法,其特征在于,所述控制每个解码器分别根据所述多个编码器生成的编码序列、上级解码器生成的第一解码序列以及对应的编码器的状态信息生成第二解码序列,包括:
对于每个解码器,获取所述多个编码器生成的编码序列,得到多个编码序列;
获取每个编码序列对应的上下文向量,得到多个上下文向量;
根据所述多个上下文向量、上级解码器生成的第一解码序列以及对应的编码器的状态信息生成所述第二解码序列。
6.根据权利要求5所述的方法,其特征在于,所述解码器为第一级的第一解码器时,所述上级解码器生成的第一解码序列为空;
所述根据所述多个上下文向量、上级解码器生成的第一解码序列以及对应的编码器的状态信息生成第二解码序列,包括:
获取所述第一解码器对应的编码器的状态信息,根据所述状态信息初始化所述第一解码器包括的第三序列模型;
根据所述多个上下文向量更新所述第三序列模型的状态;
根据更新后的第三序列模型生成所述第二解码序列。
7.根据权利要求5所述的方法,其特征在于,所述解码器为非第一级的第二解码器时,所述上级解码器生成的第一解码序列不为空;
所述根据所述多个上下文向量、上级解码器生成的第一解码序列以及对应的编码器的状态信息生成第二解码序列,包括:
获取所述第二解码器对应的编码器的状态信息,根据所述状态信息初始化所述第二解码器包括的第四序列模型;
获取上级解码器生成的第一解码序列,根据所述第一解码序列生成注意力向量,所述注意力向量用于表示词汇的重要程度;
根据所述多个上下文向量和所述注意力向量更新所述第四序列模型的状态;
根据更新后的第四序列模型生成所述第二解码序列。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所;腾讯科技(深圳)有限公司,未经中国科学院自动化研究所;腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910685616.X/1.html,转载请声明来源钻瓜专利网。