[发明专利]一种用于搜索结果排序的转义度确定方法和装置

权利要求书

1.一种用于搜索结果排序的转义度确定方法，其特征在于，该方法包括：

A、对用户输入的搜索请求进行紧密度的分析，确定所述搜索请求中各词语对的紧密度；

B、根据对所述搜索请求对应的搜索结果中各网页进行的结构信息处理的结果，统计所述搜索请求中各词语对在所述各网页中的物理距离分布；

C、利用所述搜索请求中各词语对对应的紧密度以及在所述各网页中的物理距离分布，确定所述搜索结果中各网页针对所述搜索请求的转义度，所述转义度用于对所述搜索结果中各网页进行排序。

2.根据权利要求1所述的方法，其特征在于，所述步骤A具体包括：

A1、对所述搜索请求进行分词处理；

A2、利用所述分词处理后得到的词语，确定所述搜索请求中的各词语对；

A3、查询预先挖掘出的专名词典和/或共现词典，确定所述各词语对的紧密度，其中所述专名词典包含预先挖掘出的专有名词，所述共现词典包含预先确定的各词语对在已有数据源中的共现状况。

3.根据权利要求2所述的方法，其特征在于，在所述步骤A1中还包括：对所述分词处理后得到的词语进行基于停用词表的过滤。

4.根据权利要求2所述的方法，其特征在于，所述步骤A2具体包括：

将所述分词处理后得到的词语中相邻的词语两两构成词语对；或者，

将所述分词处理后得到的词语中表意能力强的词语两两构成词语对，其中所述表意能力强的词语根据词性或者在所述搜索请求中的句子成分确定。

5.根据权利要求2所述的方法，其特征在于，在所述步骤A3中查询预先挖掘出的专名词典确定所述各词语对的紧密度具体包括：

如果所述专名词典中的专有名词包含词语对i，则将所述词语对i的紧密度确定为预设紧密度值，所述词语对i为所述搜索请求中各词语对的任一个。

6.根据权利要求2所述的方法，其特征在于，在所述步骤A3中查询预先挖掘出的共现词典确定所述各词语对的紧密度具体包括：

查询所述共现词典确定词语对i在已有数据源中的共现状况，所述共现状况包括词语对i在各距离范围等级的出现次数，所述词语对i为所述搜索请求中各词语对的任一个；

确定所述词语对i在各距离范围等级中相对出现概率值最大的距离范围等级；

将确定的所述距离范围等级所对应的紧密度作为所述词语对i的紧密度，其中预先设置不同距离范围等级对应不同的紧密度。

7.根据权利要求2或6所述的方法，其特征在于，所述共现词典的挖掘具体包括：

D1、对所述数据源进行分词处理和基于停用词表的过滤后，将得到的词语两两组合构成词语对；

D2、统计所述步骤D1得到的词语对在所述数据源中的共现状况，并将统计到的共现状况存入共现词典中。

8.根据权利要求2所述的方法，其特征在于，如果在所述步骤A3中同时采用了专名词典和共现词典，并且通过专名词典的查询能够确定出词语对i的紧密度，则以查询专名词典确定出的所述词语对i的紧密度作为所述词语对i的紧密度，所述词语对i为所述搜索请求中各词语对的任一个。

9.根据权利要求1所述的方法，其特征在于，对网页进行的结构信息处理包括：

将网页划分为网页块、段和句；

记录网页中各词语的位置信息并存储在数据库中，其中位置信息包括：所在的网页块、段、句和句内偏移。

10.根据权利要求9所述的方法，其特征在于，所述步骤B具体包括：

B1、根据所述数据库中记录的所述搜索请求中词语对i的两词语分别在网页d中的位置信息，确定出所述词语对i在网页d中的共现状况，所述词语对i为所述搜索请求中各词语对的任一个，网页d为所述搜索结果中的任一个网页；

B2、根据所述步骤B1确定出的共现状况，统计所述词语对i在网页d中的物理距离分布。