[发明专利]基于注意力机制的用于阅读理解的方法、装置和电子设备

摘要

公开了基于注意力机制的用于阅读理解的方法、装置和电子设备。该方法包括：对获得文本数据和问题数据分别进行词向量转化；处理问题和文本的词向量表示，以分别获得问题和文本的语义向量表示；对问题和文本的语义向量表示进行语义加强；通过注意力机制层获得融合问题信息的上下文表示；对融合问题信息的上下文表示进行语义加强，以及，基于加强的融合问题信息的上下文表示和加强的问题语义向量表示，获得问题数据对应的答案。这样，通过采用语义加强方法的特定模型架构优化用于机器阅读理解的系统，以提升短文本答案抽取任务的效果。

主权项

1.一种基于注意力机制的用于机器阅读理解的方法，其特征在于，包括：对获得文本数据和与所述文本数据相关的问题数据分别进行词向量转化，以分别获得所述问题数据和所述文本数据的词向量表示；以第一循环神经网络模型分别处理所述问题数据和所述文本数据的词向量表示，以分别获得所述问题数据的问题语义向量表示和所述文本数据的文本语义向量表示；通过第一语义加强层处理所述问题语义向量表示和文本向量语义表示，以分别获得加强的问题语义向量表示和加强的文本语义向量表示；通过注意力机制层处理所述加强的问题语义向量表示和所述加强的文本语义向量表示，以获得融合问题信息的上下文表示；通过第二语义加强层处理所述融合问题信息的上下文表示，以获得加强的融合问题信息的上下文表示；基于所述加强的融合问题信息的上下文表示和所述加强的问题语义向量表示，获得所述文本数据中每个词语为所述问题数据对应答案的起始位置和结束位置的概率，以将所述起始位置和结束位置的联合分布概率最大的文本片段确定为所述问题数据对应的答案。