[发明专利]一种基于散点图的数据质量检测方法及系统

权利要求书

1.一种基于散点图的数据质量检测方法，其特征在于，所述方法包括以下步骤：

定义数据格Gxy，并对多种趋势线进行拟合；

采用散点图展示数据，根据数据的实际趋势选择趋势线进行展示；

根据确定好的趋势线类型和参数生成数据质量规则；

选取适当的数据质量规则，根据阀值进行数据质量检测。

2.根据权利要求1所述的方法，其特征在于，所述定义数据格Gxy，并对多种趋势线进行拟合包括以下步骤：

定义数据格Gxy，对数据源进行扫描；

对数据源进行读取，并分析存储的数据，修正X轴展示刻度；

对每个有效展示刻度的每个有效数据格Gxy，依据总记录数和总和计算出X、Y平均值；

对每个有效展示刻度的每个Gx，计算X的总平均值和所有Gy总的平均值，并根据总平均值对每种趋势线进行拟合。

3.根据权利要求1或2所述的方法，其特征在于，所述趋势线包括：直线、对数曲线、指数曲线、二次曲线、龚柏兹曲线、逻辑曲线、周期曲线等。

4.根据权利要求1所述的方法，其特征在于，所述采用散点图展示数据信息至少包括：数据散点信息、所有Gx均值线和拟合出的趋势线等。

5.根据权利要求1所述的方法，其特征在于，所述根据数据的实际趋势选择趋势线包括：

在散点图上显示趋势线的种类，根据数据实际趋势进行选择；

当拟合出的趋势线参数不满足当前数据显示时，可进行手工调整趋势线的参数；其中，

调整方式可在散点图中直接修改趋势线公式或者对每个参数支持鼠标拖动修改，可在散点图中实时展示鼠标拖动修改时趋势线变化情况。

6.根据权利要求1所述的方法，其特征在于，所述生成数据质量规则包括：

假设趋势线为y=f(x)，即对某个x值，根据趋势线可计算出目标值y；

给目标值设定一个阀值生成数据质量规则。

7.根据权利要求6所述的方法，其特征在于，所述阀值的设定为绝对值。

8.根据权利要求6所述的方法，其特征在于，所述阀值的设定为百分比方式。

9.根据权利要求1所述的方法，其特征在于，所述数据质量检测包括：

根据散点图中数据展示的实际情况选取数据质量规则，针对每个输入数据(x,y)，根据所述规则的趋势线技术计算出x对应的目标值y’；

设定阀值的大小或者百分比，计算出目标值的合理区间进行判断实际值y的数据质量情况。

10.一种基于散点图的数据质量检测系统，其特征在于，所述系统包括：

趋势线拟合单元，用于根据定义数据格Gxy，并获取对多种趋势线进行拟合的信息；

数据展示单元，用于采用散点图展示数据，根据数据的实际趋势选择趋势线进行展示；

数据质量规则生成单元，用于根据确定好的趋势线类型和参数生成数据质量规则，并获取数据质量规则信息；

数据质量检测单元，用于选取适当的数据质量规则，根据阀值进行数据质量检测，并获取数据质量检测结果。

11.根据权利要求10所述的系统，其特征在于，所述数据展示单元选择趋势线种类包括：直线、对数曲线、指数曲线、二次曲线、龚柏兹曲线、逻辑曲线、周期曲线等。

12.根据权利要求10或11所述的系统，其特征在于，所述数据展示单元根据数据的实际趋势选择趋势线进行展示包括：

在散点图上显示趋势线的种类，根据数据实际趋势进行选择；

当拟合出的趋势线参数不满足当前数据显示时，可进行手工调整趋势线的参数；其中，

调整方式可在散点图中直接修改趋势线公式或者对每个参数支持鼠标拖动修改，可在散点图中实时展示鼠标拖动修改时趋势线变化情况。

13.根据权利要求10所述的系统，其特征在于，所述数据质量规则生成单元生成数据质量规则包括：

假设趋势线为y=f(x)，即对某个x值，根据趋势线可计算出目标值y；

给目标值设定一个阀值生成数据质量规则。