[发明专利]分类可靠性预测方法和装置

说明书

技术领域

本公开一般地涉及机器学习，更具体地说，涉及估计根据分类算法提供的预测的可靠性。

背景技术

如本领域所公知的，机器学习技术可以用于针对给定数据进行预测。通常，分类算法是一种方法，其中训练数据集被提供给此算法并用于学习。在训练阶段之后，所述分类算法可以适合于手边的具体问题，并且能够针对新的（可选地未见过的）实例预测信息。

训练数据可以包括数据点样本，每个数据点假定使用一组由分类器使用的特性，以及要预测的标记。作为一个实例，如果预测某人的性别，则所述特性可以是身高、年龄、体重和名字。将指出的是，在某些情况下，某些特性对预测有用而其他特性可能没用。在此实例中，除了所述特性之外，还为每个数据点给出性别标记，以便使得分类器能够学习如何针对新数据点预测此类信息。

在结束训练阶段之后，给出数据点的特性并且分类器可以确定预测的标记。在某些情况下，可以给出反馈以便向分类器指示预测是否正确。

发明内容

所公开的主题的一个示例性实施例是一种由处理器执行的计算机实现的方法，所述方法包括：获得由分类器工具对数据集的标记进行的预测，其中所述分类器工具旨在根据分类模型并考虑定义所述数据集的一组特性来预测所述标记；根据可靠性分类器工具获得与所述分类器工具的所述预测相关的可靠性标记的可靠性预测，其中所述可靠性分类器工具旨在根据分类模型并考虑第二组特性来预测所述可靠性标记；以及向用户输出所述标记预测和关联的可靠性预测。

所公开的主题的另一个示例性实施例是一种具有处理器的计算机化装置，所述处理器适于执行以下步骤：获得由分类器工具对数据集的标记进行的预测，其中所述分类器工具旨在根据分类模型并考虑定义所述数据集的一组特性来预测所述标记；根据可靠性分类器工具获得与所述分类器工具的所述预测相关的可靠性标记的可靠性预测，其中所述可靠性分类器工具旨在根据分类模型并考虑第二组特性来预测所述可靠性标记；以及向用户输出所述标记预测和关联的可靠性预测。

所公开的主题的另一个示例性实施例是一种计算机程序产品，包括：保存程序指令的非瞬时性计算机可读介质，当由处理器读取时，这些指令导致所述处理器执行以下步骤：获得由分类器工具对数据集的标记进行的预测，其中所述分类器工具旨在根据分类模型并考虑定义所述数据集的一组特性来预测所述标记；根据可靠性分类器工具获得与所述分类器工具的所述预测相关的可靠性标记的可靠性预测，其中所述可靠性分类器工具旨在根据分类模型并考虑第二组特性来预测所述可靠性标记；以及向用户输出所述标记预测和关联的可靠性预测。

附图说明

从下面结合附图的详细说明，将更全面地理解和领会本公开的主题，其中对应或相同的数字或字符指示对应或相同的组件。除非另外指出，否则附图提供本公开的示例性实施例或方面，并且并非限制本公开的范围。这些附图是：

图1示出了根据所公开的主题的某些示例性实施例的假定使用两个特性的一组数据点的图示；

图2A-2C示出了根据所公开的主题的某些示例性实施例的用于预测预测可靠性的方法中的步骤的流程图；

图3A和3B示出了根据所公开的主题的某些示例性实施例的不同训练方案的流程图；以及

图4示出了根据所公开的主题的某些示例性实施例的计算机化装置的组件的方块图。

具体实施方式

下面将参考根据本主题的实施例的方法、装置（系统）和计算机程序产品的流程图和/或方块图对所公开的主题进行描述。将理解，所述流程图和/或方块图的方块以及所述流程图和/或方块图中的方块的组合可以由计算机程序指令来实现。这些计算机程序指令可以被提供给通用计算机、专用计算机、被测试处理器或其他可编程数据处理装置的一个或多个处理器以产生机器，以便通过所述计算机或其他可编程数据处理装置的处理器执行的所述指令产生用于实现在一个或多个流程图和/或方块图方块中指定的功能/操作的装置。

这些计算机程序指令也可以被存储在能够引导计算机或其他可编程数据处理装置以特定方式执行功能的非瞬时计算机可读介质中，以便存储在所述非瞬时计算机可读介质中的所述指令产生一件包括实现在一个或多个流程图和/或方块图方块中指定的功能/操作的指令装置的制品。

所述计算机程序指令还可被加载到设备、计算机或其他可编程数据处理装置，以导致在所述计算机或其他可编程装置上执行一系列操作步骤以产生计算机实现的过程，从而在所述计算机或其他可编程装置上执行的所述指令提供用于实现在一个或多个流程图和/或方块图方块中指定的功能/操作的过程。