[发明专利]优质内容确定方法、装置、电子设备及存储介质

权利要求书

1.一种优质内容确定方法，其特征在于，包括：

服务端将具有相同类别标签的任意两个不同内容组成对比集；

针对任一对比集，所述服务端将所述对比集投放给测试集中的M个客户端，M为大于一的正整数，其中，按照不同的引导策略分别将所述对比集投放给M个客户端中的两组客户端，所述不同的引导策略包括：

引导用户首先查看所述对比集中的第一内容，若用户查看了所述第一内容，引导用户查看所述对比集中的第二内容的第一引导策略，以及，引导用户首先查看所述第二内容，若用户查看了所述第二内容，引导用户查看所述第一内容的第二引导策略；

所述服务端获取所述测试集中的至少一个客户端上报的评审结果；所述评审结果为从所述对比集中的两个内容中确定出的优质内容，为进行上报的客户端根据所述测试集中的客户端对应的用户对于所述对比集中的内容的查看情况信息，基于预定评审策略生成的。

2.根据权利要求1所述的方法，其特征在于，

所述将所述对比集投放给所述类别标签对应的测试集中的M个客户端包括：将所述M个客户端分为第一组客户端和第二组客户端，按照不同的引导策略分别将所述对比集投放给所述第一组客户端和所述第二组客户端。

3.根据权利要求2所述的方法，其特征在于，

所述按照不同的引导策略分别将所述对比集投放给所述第一组客户端和所述第二组客户端包括：

基于第一引导策略，将所述对比集投放给所述第一组客户端；

基于第二引导策略，将所述对比集投放给所述第二组客户端。

4.根据权利要求3所述的方法，其特征在于，

所述预定评审策略包括：

将所述第一引导策略对应的第一转换值与所述第二引导策略对应的第二转换值进行比较，所述第一转换值为查看了所述第一内容后继续查看所述第二内容的用户数量与查看了所述第一内容的用户数量的比值，所述第二转换值为查看了所述第二内容后继续查看所述第一内容的用户数量与查看了所述第二内容的用户数量的比值；

若所述第一转换值大于所述第二转换值，则确定所述第一内容为优质内容，若所述第二转换值大于所述第一转换值，则确定所述第二内容为优质内容。

5.根据权利要求1所述的方法，其特征在于，

所述服务端将具有相同类别标签的任意两个不同内容组成对比集之前，进一步包括：

所述服务端将待标注的内容投放给标注集中的N个客户端，N为大于一的正整数；

所述服务端获取所述标注集中的至少一个客户端上报的标注结果；所述标注结果为生成的所述待标注的内容的类别标签；所述标注结果为进行上报的客户端根据获取到的候选类别信息，基于预定标注策略生成的；所述候选类别信息为所述标注集中的任一客户端确定对应的用户查看了所述待标注的内容后生成并发送给所述标注集中的其它客户端的，为根据对应的用户对于不同类别内容的喜好情况信息确定出的所述待标注的内容最可能属于的至少一个类别。

6.根据权利要求5所述的方法，其特征在于，

所述预定标注策略包括：分别统计不同类别被确定为候选类别的次数，按照所述次数由大到小的顺序，对不同类别进行排序，将排序后处于前Q位的类别作为所述待标注的内容的类别标签，Q为正整数。