[发明专利]文本信息检索装置以及文本信息检索方法有效
申请号: | 200610115469.5 | 申请日: | 2006-08-10 |
公开(公告)号: | CN101122909A | 公开(公告)日: | 2008-02-13 |
发明(设计)人: | 黑田昌芳;桑原祯司;伊藤荣朗;虞立群;陈奕秋;汪更生;林霜梅 | 申请(专利权)人: | 株式会社日立制作所;上海交通大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京纪凯知识产权代理有限公司 | 代理人: | 龙淳;杨琦 |
地址: | 日本*** | 国省代码: | 日本;JP |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 信息 检索 装置 以及 方法 | ||
1.一种文本信息检索装置,其特征在于,
具备:
文章分词部,将资源文本信息和用户兴趣文本信息中的文档内容切成一个个独立的词语;
第一特征提取部,使用从资源文本信息中被所述文章分词部切分出的词语,提取出资源文本的第一特征参数;
第二特征提取部,使用从用户兴趣文本信息中被所述文章分词部切分出的词语,提取出表现用户兴趣的第二特征参数;
文本分类部,用第二特征参数和分类参数对用户兴趣文本进行分类;
用户模板制作部,基于所述文本分类部中的分类,将所述第二特征参数分为两组或两组以上的分类,制作反映用户兴趣的用户模板;
文本信息联想检索部,按照每个分类计算出所述第一特征参数与在所述用户模板中的所述第二特征参数之间的相似度,并基于该计算出的相似度的大小来检索文本信息,给出检索结果;
语义相似网制作部,制作用来记录从语义相似网训练文本集被文章分词部切分出的词语之间的共现频率、平均距离、相似度、上下位关系的语义相似网;
特征向量扩展部,从所述语义相似网中选择与所述第二特征参数中的特征词相似度高的词语,以该被选择的相似度高的词语为基础,对用户模板的第二特征参数进行扩展,
所述用户模板制作部基于文本分类部的分类,将所述被扩展的第二特征参数分为两组或两组以上的分类,制作反映用户兴趣的用户模板,
所述特征向量扩展部按照以下公式(3)计算在语义相似网中所含的词语ws的权重RealWeight(ws),当该ws的权重RealWeight(ws)大于规定的权重阈值时,从语义相似网中选择该词语ws,
RealWeight(ws)=RealWeight(wo)×Sim(wo,ws)(3)
其中,wo和RealWeight(wo)是在所述第二特征提取部中提取出的词语wo以及该词语wo的特征权重,Sim(wo,ws)是词语wo和词语ws的相似度,该相似度Sim(wo,ws)由以下公式(4)计算得到,
Sim(wo,ws)=α×Simlexical(wo,ws)+β×Simstatistic(wo,ws)(4)
其中,“α”和“β”是比例系数,满足如下关系:
α,β∈(0,1),且α+β=1
Simlexical(wo,ws)由以下公式算出,
其中,depth是词语wo和词语ws在语义树中的路径距离,maxDepth为语义树的最大深度,δ为调整参数,
Simstatistic(wo,ws)由以下公式算出,
其中,为词语wo和词语ws在设定范围内的共现频率,为词语wo和词语ws的平均共现距离,α为调整参数,
其中,Entropy(ws)由以下公式算出,
这里,P(vi/ws)为语义相似网训练文本集中词语ws出现的条件下,出现类别vi的概率。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于株式会社日立制作所;上海交通大学,未经株式会社日立制作所;上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/200610115469.5/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置