[发明专利]召回策略的准召率的确定方法、装置、设备及存储介质

说明书

本公开提供一种的召回策略的准召率的确定方法、装置、设备及存储介质，涉及智能推荐技术，包括：根据召回策略生成用于在线召回的向量数据；根据向量数据、已有的真实用户点击数据模拟线上召回过程，并确定召回结果；根据召回结果确定召回策略对应的准召率。本公开提供的方法、装置、设备及可读存储介质中，可以通过线下模拟的方式确定召回结果，再根据召回结果确定准召率，无需将系统上线获取召回结果，从而能够提高确定召回策略准召率的效率。

技术领域

本公开涉及计算机技术，尤其涉及智能推荐技术。

背景技术

互联网能够向用户提供海量的信息，而智能推荐系统能够迅速帮助用户找到感兴趣的信息。

推荐系统的推荐，是通过建立人和物品的关联关系，围绕数据、算法、系统为核心，将海量的数据信息，利用推荐系统的算法，应用到对应的召回策略和排序策略中，实现提供给用户个性化的推荐过程。

其中召回策略用于生成推荐的候选集，在原始数据中通过算法和规则匹配用户的候选集。排序策略根据不同的算法模型对召回策略生成的候选集进行重排序，得到推荐候选集列表。

由于目前存在多种召回策略，而现有技术中需要根据召回策略和排序策略生成推荐信息，并在线上应用，再基于线上应用的结果确定召回策略的准召率，从而利用准召率确定召回策略的效果。

但是，通过线上测试的方式需要较长的时间，导致评估召回策略的效率较低，因此，如何提高召回策略的评估效率，是本领域技术人员亟需解决的技术问题。

发明内容

本公开提供一种召回策略的准召率的确定方法、装置、设备及存储介质，以提高召回策略的评估效率。

本公开的第一个方面是提供一种召回策略的准召率的确定方法，包括：

根据所述召回策略生成用于在线召回的向量数据；

根据所述向量数据、已有的真实用户点击数据模拟线上召回过程，并确定召回结果；

根据所述召回结果确定所述召回策略对应的准召率。

在一种可选的实施方式中，所述向量数据中包括用户向量；

若所述召回策略包括基于用户的协同过滤，则所述根据所述向量数据、已有的真实用户点击数据模拟线上召回过程，并确定召回结果，包括：

根据所述用户向量确定与第一预设用户对应的相似用户；

根据所述真实用户点击数据获取在预设时间段内所述第一预设用户的第一点击内容信息、所述相似用户的第二点击内容信息；

根据所述第一点击内容信息、所述第二点击内容信息确定所述召回结果。

在这种可选的实施方式中，可以利用确定的用户向量模拟基于用户的协同过滤向第一预设用户进行内容推荐的过程，进而得到召回结果。由于在推荐系统中，是根据用户向量向用户进行推荐内容的，因此，这种实施方式能够模拟真实的推荐过程。

在一种可选的实施方式中，所述根据所述用户向量确定与第一预设用户对应的相似用户，包括：

确定所述第一预设用户的预设向量，根据所述预设向量在所述用户向量中确定对应的相似向量；

将所述相似向量对应的用户确定为与所述预设向量对应的相似用户。

在这种可选的实施方式中，可以根据确定的用户向量确定第一预设用户的相似用户，进而利用召回策略对应的向量数据模拟出在线向第一预设用户推荐内容时，确定的与该第一预设用户匹配的相似用户。

在一种可选的实施方式中，所述根据所述第一点击内容信息、所述第二点击内容信息确定所述召回结果，包括：