[发明专利]召回策略的准召率的确定方法、装置、设备及存储介质

权利要求书

1.一种召回策略的准召率的确定方法，其特征在于，包括：

根据所述召回策略生成用于在线召回的向量数据；

根据所述向量数据、已有的真实用户点击数据模拟线上召回过程，并确定召回结果；

根据所述召回结果确定所述召回策略对应的准召率；

所述向量数据包括内容向量；

若所述召回策略包括基于内容的协同过滤，则所述根据所述向量数据、已有的真实用户点击数据模拟线上召回过程，并确定召回结果，包括：

获取第二预设用户在第二时间阈值对应的第三点击内容；

根据所述第三点击内容确定相关内容候选集、检索内容候选集；

根据所述向量数据中包括的内容向量、所述相关内容候选集、所述检索内容候选集确定所述召回结果。

2.根据权利要求1所述的方法，其特征在于，所述向量数据中包括用户向量；

若所述召回策略包括基于用户的协同过滤，则所述根据所述向量数据、已有的真实用户点击数据模拟线上召回过程，并确定召回结果，包括：

根据所述用户向量确定与第一预设用户对应的相似用户；

根据所述真实用户点击数据获取在预设时间段内所述第一预设用户的第一点击内容信息、所述相似用户的第二点击内容信息；

根据所述第一点击内容信息、所述第二点击内容信息确定所述召回结果。

3.根据权利要求2所述的方法，其特征在于，所述根据所述用户向量确定与第一预设用户对应的相似用户，包括：

确定所述第一预设用户的预设向量，根据所述预设向量在所述用户向量中确定对应的相似向量；

将所述相似向量对应的用户确定为与所述预设向量对应的相似用户。

4.根据权利要求2所述的方法，其特征在于，所述根据所述第一点击内容信息、所述第二点击内容信息确定所述召回结果，包括：

比对所述第一点击内容、所述第二点击内容的点击时间与第一时间阈值；

根据比对结果确定所述召回策略对应的检索信息、内容相关信息。

5.根据权利要求4所述的方法，其特征在于，所述根据比对结果确定所述召回策略对应的检索信息、内容相关信息，包括：

根据所述点击时间大于所述第一时间阈值的第一点击内容、第二点击内容确定所述检索信息；

根据所述点击时间小于所述第一时间阈值的第一点击内容、第二点击内容确定所述内容相关信息。

6.根据权利要求5所述的方法，其特征在于，

所述根据所述点击时间大于所述第一时间阈值的第一点击内容、第二点击内容确定所述检索信息，包括：

在点击时间大于所述第一时间阈值的第一点击内容中，筛选出点击时间最大的第一预设数量个第一筛选内容，在点击时间大于所述第一时间阈值的第二点击内容中，筛选出点击时间最大的第一预设数量个第二筛选内容；

根据所述第一筛选内容、所述第二筛选内容确定所述检索信息；

所述根据所述点击时间小于所述第一时间阈值的第一点击内容、第二点击内容确定所述内容相关信息，包括：

在点击时间小于所述第一时间阈值的第一点击内容中，筛选出点击时间最小的第二预设数量个第三筛选内容，在点击时间小于所述第一时间阈值的第二点击内容中，筛选出点击时间最小的第二预设数量个第四筛选内容；

根据所述第三筛选内容、所述第四筛选内容确定所述内容相关信息。

7.根据权利要求1所述的方法，其特征在于，所述根据所述向量数据中包括的内容向量、所述相关内容候选集、所述检索内容候选集确定所述召回结果，包括：

根据所述内容向量、所述相关内容候选集确定内容相关信息；

根据所述检索内容候选集确定检索信息。

8.根据权利要求4-7任一项所述的方法，其特征在于，所述根据所述召回结果确定所述召回策略对应的准召率，包括：

根据所述内容相关信息、所述检索信息，确定检索到相关内容的第一数量、检索到不相关内容的第二数量、未检索到相关内容的第三数量；

根据所述第一数量、所述第二数量、所述第三数量确定所述准召率。