[发明专利]信息处理方法、装置及存储介质在审
申请号: | 202010059203.3 | 申请日: | 2020-01-19 |
公开(公告)号: | CN111259148A | 公开(公告)日: | 2020-06-09 |
发明(设计)人: | 徐泽宇;邓雄文 | 申请(专利权)人: | 北京松果电子有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/33;G06F40/289 |
代理公司: | 北京善任知识产权代理有限公司 11650 | 代理人: | 康艳青 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 信息处理 方法 装置 存储 介质 | ||
1.一种信息处理方法,其特征在于,包括:
对第一语料数据进行分词处理,得到包含有至少一个词语的第二语料数据;
基于第一预训练模型对所述第二语料数据所包含的所述至少一个词语进行处理,得到所述第二语料数据所对应的第一特征向量序列;
基于第二预训练模型对所述第一语料数据所包含的字符进行处理,得到所述第一语料数据所对应的第二特征向量序列;
基于所述第一特征向量序列和所述第二特征向量序列,得到目标特征向量。
2.根据权利要求1所述的方法,其特征在于,所述第一特征向量序列和所述第二特征向量序列分别包含有至少一个特征向量;所述基于所述第一特征向量序列和所述第二特征向量序列,得到目标特征向量,包括:
基于卷积神经网络模型对所述第一特征向量序列进行处理,从所述第一特征向量序列中提取第一特征向量;
基于长短期记忆模型对所述第一特征向量序列进行处理,从所述第一特征向量序列中提取第二特征向量;
基于所述第二预训练模型对所述第二特征向量序列进行处理,从所述第二特征向量序列中提取第三特征向量;
基于所述第一特征向量、所述第二特征向量和所述第三特征向量,通过拼接处理得到目标特征向量。
3.根据权利要求2所述的方法,其特征在于,所述基于所述第一特征向量、所述第二特征向量和所述第三特征向量,通过拼接处理得到目标特征向量,包括:
在所述第一特征向量的末端拼接所述第二特征向量,并在拼接后的第二特征向量的末端拼接所述第三特征向量,得到拼接后的特征向量;
对所述拼接后的特征向量进行降维处理,得到所述目标特征向量。
4.根据权利要求1所述的方法,其特征在于,所述第二语料数据所包含的词语具有词标识;所述基于第一预训练模型对所述第二语料数据进行处理,得到所述第二语料数据所对应的第一特征向量序列,包括:
确定所述第二语料数据包含的各所述词语的词标识;
基于各所述词语的词标识查询所述第一预训练模型的设定词向量映射表,从所述设定词向量映射表中确定各所述词语的特征向量,其中,所述设定词向量映射表包含有各所述词语的词标识与各所述特征向量之间的映射关系;
将确定的各所述词语的特征向量按照第一设定顺序进行排列,得到所述第一特征向量序列。
5.根据权利要求1所述的方法,其特征在于,所述第一语料数据所包含的字符具有字标识;所述基于第二预训练模型对所述第一语料数据进行处理,得到所述第一语料数据所对应的第二特征向量序列,包括:
确定所述第一语料数据包含的各所述字符的字标识;
所述第二预训练模型对所述第一语料数据中各所述字符的上下文进行分析,得到分析结果;
基于所述分析结果以及所述字符的字标识,查询所述第二预训练模型的设定字向量映射表,从所述设定词向量映射表中确定各所述字符的特征向量,其中,所述设定字向量映射表包含有各所述字符的字标识与各所述特征向量之间的映射关系;
将确定的各所述字符的特征向量按照第二设定顺序进行排列,得到所述第二特征向量序列。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于设定分类模型对所述目标特征向量进行分类处理,得到分类结果。
7.一种信息处理装置,其特征在于,包括:
第一处理模块,配置为对第一语料数据进行分词处理,得到包含有至少一个词语的第二语料数据;
第二处理模块,配置为基于第一预训练模型对所述第二语料数据所包含的所述至少一个词语进行处理,得到所述第二语料数据所对应的第一特征向量序列;
第三处理模块,配置为基于第二预训练模型对所述第一语料数据所包含的字符进行处理,得到所述第一语料数据所对应的第二特征向量序列;
获取模块,配置为基于所述第一特征向量序列和所述第二特征向量序列,得到目标特征向量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京松果电子有限公司,未经北京松果电子有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010059203.3/1.html,转载请声明来源钻瓜专利网。