[发明专利]文本信息检索装置以及文本信息检索方法有效

专利信息
申请号: 200610115469.5 申请日: 2006-08-10
公开(公告)号: CN101122909A 公开(公告)日: 2008-02-13
发明(设计)人: 黑田昌芳;桑原祯司;伊藤荣朗;虞立群;陈奕秋;汪更生;林霜梅 申请(专利权)人: 株式会社日立制作所;上海交通大学
主分类号: G06F17/30 分类号: G06F17/30
代理公司: 北京纪凯知识产权代理有限公司 代理人: 龙淳;杨琦
地址: 日本*** 国省代码: 日本;JP
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 文本 信息 检索 装置 以及 方法
【权利要求书】:

1.一种文本信息检索装置,其特征在于,

具备:

文章分词部,将资源文本信息和用户兴趣文本信息中的文档内容切成一个个独立的词语;

第一特征提取部,使用从资源文本信息中被所述文章分词部切分出的词语,提取出资源文本的第一特征参数;

第二特征提取部,使用从用户兴趣文本信息中被所述文章分词部切分出的词语,提取出表现用户兴趣的第二特征参数;

文本分类部,用第二特征参数和分类参数对用户兴趣文本进行分类;

用户模板制作部,基于所述文本分类部中的分类,将所述第二特征参数分为两组或两组以上的分类,制作反映用户兴趣的用户模板;

文本信息联想检索部,按照每个分类计算出所述第一特征参数与在所述用户模板中的所述第二特征参数之间的相似度,并基于该计算出的相似度的大小来检索文本信息,给出检索结果;

语义相似网制作部,制作用来记录从语义相似网训练文本集被文章分词部切分出的词语之间的共现频率、平均距离、相似度、上下位关系的语义相似网;

特征向量扩展部,从所述语义相似网中选择与所述第二特征参数中的特征词相似度高的词语,以该被选择的相似度高的词语为基础,对用户模板的第二特征参数进行扩展,

所述用户模板制作部基于文本分类部的分类,将所述被扩展的第二特征参数分为两组或两组以上的分类,制作反映用户兴趣的用户模板,

所述特征向量扩展部按照以下公式(3)计算在语义相似网中所含的词语ws的权重RealWeight(ws),当该ws的权重RealWeight(ws)大于规定的权重阈值时,从语义相似网中选择该词语ws

RealWeight(ws)=RealWeight(wo)×Sim(wo,ws)(3)

其中,wo和RealWeight(wo)是在所述第二特征提取部中提取出的词语wo以及该词语wo的特征权重,Sim(wo,ws)是词语wo和词语ws的相似度,该相似度Sim(wo,ws)由以下公式(4)计算得到,

Sim(wo,ws)=α×Simlexical(wo,ws)+β×Simstatistic(wo,ws)(4)

其中,“α”和“β”是比例系数,满足如下关系:

α,β∈(0,1),且α+β=1

Simlexical(wo,ws)由以下公式算出,

Simlexical(wo,ws)=1-depth2(4maxDepth2+δ)]]>

其中,depth是词语wo和词语ws在语义树中的路径距离,maxDepth为语义树的最大深度,δ为调整参数,

Simstatistic(wo,ws)由以下公式算出,

Simstatistic(wo,ws)=(co_freqwows×αdist(wo,ws)+α/Entropy(ws)]]>

其中,为词语wo和词语ws在设定范围内的共现频率,为词语wo词语ws的平均共现距离,α为调整参数,

其中,Entropy(ws)由以下公式算出,

Entropy(ws)=-ΣiP(vi/ws)log(P(vi/ws))]]>

这里,P(vi/ws)为语义相似网训练文本集中词语ws出现的条件下,出现类别vi的概率。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于株式会社日立制作所;上海交通大学,未经株式会社日立制作所;上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/200610115469.5/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top