[发明专利]一种生成分词结果的方法及装置有效
| 申请号: | 201610671511.5 | 申请日: | 2016-08-15 | 
| 公开(公告)号: | CN107766317A | 公开(公告)日: | 2018-03-06 | 
| 发明(设计)人: | 韦安军 | 申请(专利权)人: | 南京中兴新软件有限责任公司 | 
| 主分类号: | G06F17/27 | 分类号: | G06F17/27 | 
| 代理公司: | 工业和信息化部电子专利中心11010 | 代理人: | 于小凤 | 
| 地址: | 210000 江苏*** | 国省代码: | 江苏;32 | 
| 权利要求书: | 查看更多 | 说明书: | 查看更多 | 
| 摘要: | |||
| 搜索关键词: | 一种 生成 分词 结果 方法 装置 | ||
1.一种生成分词结果的方法,其特征在于,包括:
将句子进行分词,得到多个词语;
使用所述多个词语进行组合,得到组合成所述句子的至少一个词语组合,将所述至少一个词语组合中的词语的集合确定为所述句子的分词结果。
2.根据权利要求1所述的方法,其特征在于,所述使用所述多个词语进行组合,得到组合成所述句子的至少一个词语组合,将所述至少一个词语组合中的词语的集合确定为所述句子的分词结果,包括:
将所述多个词语按照各词语在所述句子中的位置进行排序,记录每个词语在所述句子中的开始以及结束分割位置;
从位于所述句子末尾的词语开始,依次从排序后的多个词语中查找与当前词语相邻且开始以及结束分割位置均不同的词语,依次记录查找到的词语,得到第一词语组合;
使用所述第一词语组合中位于所述句子首位的第一首位词语,从所述第一首位词语开始,依次从排序后的多个词语中查找与当前词语相邻,且开始以及结束分割位置均不同的词语,依次记录查找到的词语,得到第二词语组合;
将所述所述第一词语组合以及所述第二词语组合的交集确定为所述句子的分词结果。
3.根据权利要求1所述的方法,其特征在于,所述使用所述多个词语进行组合,得到组合成所述句子的至少一个词语组合,将所述至少一个词语组合中的词语的集合确定为所述句子的分词结果,包括:
将所述多个词语按照各词语在所述句子中的位置进行排序,记录每个词语在所述句子中的开始以及结束分割位置;
从位于所述句子末尾的词语开始,依次从排序后的多个词语中查找与当前词语相邻且开始以及结束分割位置均不同的词语,依次记录查找到的词语,得到第三词语组合;
当所述第三词语组合中存在两个开始以及结束位置均相同的词语,则删除所述第三词语组合中最后记录的一个词语;
使用所述第三词语组合中位于所述句子首位的第二首位词语,从所述第二首位词语开始,依次从排序后的多个词语中查找与当前词语相邻,且开始以及结束分割位置均不同的词语,依次记录查找到的词语,得到第四词语组合;
将所述所述第三词语组合以及所述第四词语组合的交集确定为所述句子的分词结果。
4.根据权利要求1所述的方法,其特征在于,所述使用所述多个词语进行组合,得到组合成所述句子的至少一个词语组合,将所述至少一个词语组合中的词语的集合确定为所述句子的分词结果,包括:
按照所述多个词语在所述句子中的位置的顺序,将所述多个词语存储于树形结构中;
记录每个词语在所述句子中的开始以及结束分割位置;
从所述树形结构的各叶子节点向根节点查找与当前叶子节点存储的词语相邻且开始以及结束分割位置均不同的词语,依次记录查找到的词语,得到多个词语组合;
将得到的多个词语组合的交集确定为所述句子的分词结果。
5.根据权利要求1至4任意一项所述的方法,其特征在于,所述将句子进行分词,得到多个词语,包括:
将所述句子基于预设词典进行分词,得到多个词语。
6.一种生成分词结果的装置,其特征在于,包括:
分词模块,用于将句子进行分词,得到多个词语;
组合模块,用于使用所述多个词语进行组合,得到组合成所述句子的至少一个词语组合,将所述至少一个词语组合中的词语的集合确定为所述句子的分词结果。
7.根据权利要求6所述的装置,其特征在于,所述组合模块,包括:
第一排序单元,用于将所述多个词语按照各词语在所述句子中的位置进行排序,记录每个词语在所述句子中的开始以及结束分割位置;
第二查找单元,用于从位于所述句子末尾的词语开始,依次从排序后的多个词语中查找与当前词语相邻且开始以及结束分割位置均不同的词语,依次记录查找到的词语,得到第一词语组合;
第三查找单元,用于使用所述第一词语组合中位于所述句子首位的第一首位词语,从所述第一首位词语开始,依次从排序后的多个词语中查找与当前词语相邻,且开始以及结束分割位置均不同的词语,依次记录查找到的词语,得到第二词语组合;
第一确定单元,用于将所述所述第一词语组合以及所述第二词语组合的交集确定为所述句子的分词结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京中兴新软件有限责任公司,未经南京中兴新软件有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610671511.5/1.html,转载请声明来源钻瓜专利网。





