[发明专利]用于对待处理的短文本信息进行扩展的方法、装置和设备有效
申请号: | 201010623672.X | 申请日: | 2010-12-30 |
公开(公告)号: | CN102567290A | 公开(公告)日: | 2012-07-11 |
发明(设计)人: | 冼健;陈宁昱;田浩 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | G06F17/21 | 分类号: | G06F17/21;G06F17/30 |
代理公司: | 北京汉昊知识产权代理事务所(普通合伙) 11370 | 代理人: | 罗朋 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 对待 处理 文本 信息 进行 扩展 方法 装置 设备 | ||
1.一种计算机实现的用于对待处理的短文本信息进行扩展的方法,其中,该方法包括以下步骤:
a获取所述待处理的短文本信息;
b基于该短文本信息来获取与其相关的一个或多个相关扩展信息;
c基于第一预定规则,并根据所述短文本信息,由所述一个或多个相关扩展信息来获得所述短文本信息的扩展特征词向量;
其中,所述扩展特征词向量包括多个扩展特征信息,所述每个扩展特征信息与所述短文本信息不完全相同。
2.根据权利要求1所述的方法,其中,所述步骤c还包括以下步骤:
-对所述相关扩展信息进行切分,获得多个特征信息;
-基于所述第一预定规则,并根据所述短文本信息,由所述多个特征信息中选择所述多个扩展特征信息。
3.根据权利要求1所述的方法,其中,所述步骤c还包括以下步骤:
-基于所述第一预定规则,并根据所述短文本信息,由多个所述相关扩展信息中选择一个或多个相关扩展信息;
-对所选择的相关扩展信息进行切分,获得所述多个扩展特征信息。
4.根据权利要求1至3中任一项所述的方法,其中,所述第一预定规则参考以下至少一项因素:
-所述相关扩展信息与所述短文本信息的相关度;
-所述相关扩展信息的类别;
-所述短文本信息包含的信息单元在所述相关扩展信息中的分布状态;
-由所述相关扩展信息切分得到的特征信息与所述短文本信息的相似度。
5.根据权利要求1至4中任一项所述的方法,其中,所述第一预定规则还参考以下至少一项因素:
-由所述相关扩展信息切分得到的特征信息的分布状态;
-由所述相关扩展信息切分得到的特征信息的语义特征。
6.根据权利要求1至5中任一项所述的方法,其中,所述扩展特征词向量还包括分别与所述多个扩展特征信息相对应的多个权重值,
其中,所述步骤c还包括以下步骤:
-基于所述第一预定规则,并根据所述短文本信息获取所述多个扩展特征信息的权重值。
7.根据权利要求1至6中任一项所述的方法,其中,该方法还包括以下步骤:
-建立和更新扩展特征向量库,其中,该扩展特征向量库包括多个短文本信息及其对应的扩展特征词向量;
其中,该方法还包括以下步骤:
A基于第二预定规则,根据所述待处理的短文本信息,在所述扩展特征向量库中进行查询,获得一个或多个相关短文本信息及其对应的扩展特征词向量;
B根据所获得的所述相关短文本信息的扩展特征词向量,来获得所述待处理短文本信息的扩展特征词向量。
8.根据权利要求7所述的方法,其中,所述第二预定规则包括根据多层级匹配规则,逐级地对所述待处理短文本信息进行预定处理,所述步骤A包括以下步骤:
A1根据所述待处理短文本信息的当前层级匹配规则对其进行相应处理;
A2判断处理后的待处理短文本信息是否能够与一个或多个已扩展短文本信息成功匹配;
A3当判断成功匹配时,将所述成功匹配的一个或多个已扩展短文本信息作为所述相关短文本信息,并获取该相关短文本信息对应的扩展特征词向量;
其中,所述步骤B包括以下步骤:
B1根据所述相关短文本信息的扩展特征词向量及当前匹配层级来获得所述待处理短文本信息的扩展特征词向量;
其中,所述步骤A1还包括以下步骤:
-当判断未能成功匹配时,选择下一层级匹配规则作为当前层级匹配规则;
-根据所选择的当前层级匹配规则对所述待处理短文本信息进行相应处理。
9.根据权利要求8所述的方法,其中,所述步骤A1中所述相应处理包括以下任一种:
-保留所述待处理短文本信息的全部内容的处理;
-去除无效信息的处理;
-根据预设的词汇权重值来提取信息单元的处理;
-将所述待处理短文本信息与其他短文本信息进行聚合的处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201010623672.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:野生铁皮石斛原种保护及人工培育方法
- 下一篇:电子秤防作弊方法及电子秤