[发明专利]语义识别方法、装置、电子设备及计算机可读存储介质在审
| 申请号: | 201911330528.4 | 申请日: | 2019-12-20 |
| 公开(公告)号: | CN111125331A | 公开(公告)日: | 2020-05-08 |
| 发明(设计)人: | 王炳乾 | 申请(专利权)人: | 京东方科技集团股份有限公司 |
| 主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F16/33;G06F16/36;G06F40/295;G06F40/30;G06N3/04 |
| 代理公司: | 北京市立方律师事务所 11330 | 代理人: | 张筱宁;宋海斌 |
| 地址: | 100015 *** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 语义 识别 方法 装置 电子设备 计算机 可读 存储 介质 | ||
1.一种语义识别方法,其特征在于,包括:
获取待识别的目标语句并输入基于双向编码器表征模型;
运行所述基于双向编码器表征模型,确定所述目标语句的实体信息和意图信息;
根据所述实体信息和所述意图信息,确定所述目标语句的涵义。
2.根据权利要求1所述的语义识别方法,其特征在于,所述基于双向编码器表征模型是通过下述方式预先训练得到的,包括:
获取若干样本语句,所述样本语句包含以若干类特征标记分别进行分类标记的字段;
根据各所述样本语句、以及基于双向编码器表征模型的训练模型,确定所述基于双向编码器表征模型;所述基于双向编码器表征模型的训练模型为在所述基于双向编码器表征模型的最后一层之后加上预定任务分类层。
3.根据权利要求2所述的语义识别方法,其特征在于,所述特征标记包括实体类别标记和意图类别标记;
所述获取若干样本语句,所述样本语句包含以若干类特征标记分别进行分类标记的字段的步骤,包括:
将所述样本语句中实体信息对应的字段,标记为实体标记数据,将所述样本语句中意图信息对应的字段,标记为意图标记数据;
所述实体标记数据和所述意图标记数据之间以预设符号间隔。
4.根据权利要求3所述的语义识别方法,其特征在于,所述根据各所述样本语句、以及基于双向编码器表征模型的训练模型,确定所述基于双向编码器表征模型的步骤,包括:
将每个所述样本语句输入所述训练模型,使得所述样本语句的意图标记数据,转化成所述训练模型中最后一个意图分类层池化后输出的意图特征,并使得所述样本语句的实体标记数据,转化成所述训练模型中最后一个实体分类层输出的实体特征;
根据所述样本语句的意图特征、以及所述最后一个意图分类层的加权参数矩阵和偏置参数,确定出所述样本语句的意图预测结果;
根据所述样本语句的实体特征、以及所述最后一个实体分类层的加权参数矩阵和偏置参数,确定出所述样本语句的实体预测结果;
根据所述样本语句的基于未知量条件下的意图预测结果的概率、以及基于所述未知量条件下的实体预测结果的概率,确定出所述训练模型的目标函数;
调整所述基于双向编码器表征模型中的参数,使得所述目标函数达到最大值且所述预定任务分类层中的联合损失函数达到最小,得到所述基于双向编码器表征模型。
5.根据权利要求4所述的语义识别方法,其特征在于,所述根据所述样本语句的意图特征、以及所述最后一个意图分类层的加权参数矩阵和偏置参数,确定出所述样本语句的意图预测结果的步骤,包括:
将所述意图特征接入TextCNN模型,确定收敛处理后的意图特征;
所述根据所述样本语句的实体特征、以及所述最后一个实体分类层的加权参数矩阵和偏置参数,确定出所述样本语句的实体预测结果的步骤,包括:
将所述实体特征接入神经网络的条件随机场层和/或BiLSTM层,通过所述BiLSTM层确定所述实体特征的标签概率,通过所述条件随机场层确定具有预设约束信息的实体信息。
6.根据权利要求2所述的语义识别方法,其特征在于,所述特征标记还包括单词类别标记;
所述获取若干样本语句,所述样本语句包含以若干类特征标记分别进行分类标记的字段的步骤,包括:
所述样本语句中实体信息和意图信息之外的单词信息对应的字段以所述单词类别标记,标记为单词数据;
将所述单词数据从所述样本语句中删除,记录删除的所述单词数据在所述样本语句中的位置信息。
7.根据权利要求1所述的语义识别方法,其特征在于,所述根据所述实体信息和所述意图信息,确定所述目标语句的涵义的步骤之后,还包括:
根据所述实体信息,检索目标数据库,确定若干条候选目标信息;
根据所述意图信息和所述候选目标信息,确定最终目标信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司,未经京东方科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911330528.4/1.html,转载请声明来源钻瓜专利网。





