[发明专利]数据处理方法、系统、设备及存储介质在审
| 申请号: | 202210399961.9 | 申请日: | 2022-04-15 |
| 公开(公告)号: | CN114925977A | 公开(公告)日: | 2022-08-19 |
| 发明(设计)人: | 占怀旻;戢洋 | 申请(专利权)人: | 阿里云计算有限公司 |
| 主分类号: | G06Q10/06 | 分类号: | G06Q10/06;G06Q50/04;G06F16/22;G06F16/242;G06F16/2455 |
| 代理公司: | 北京太合九思知识产权代理有限公司 11610 | 代理人: | 刘瑞霞 |
| 地址: | 310012 浙江省*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据处理 方法 系统 设备 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
获取计算任务所需的待处理数据;
对所述待处理数据进行特征分析,以确定所述待处理数据中的异常数据;
根据所述计算任务的计算意图,对所述待处理数据进行计算,以得到所述计算任务对应的计算结果;
根据所述计算意图和所述异常数据,确定所述计算结果的置信度;
输出所述计算结果和所述计算结果的置信度。
2.根据权利要求1所述的方法,其特征在于,所述待处理数据包括:至少一个维度的待处理数据;所述对所述待处理数据进行特征分析,以确定所述待处理数据中的异常数据,包括:
从所述待处理数据中,获取所述至少一个维度分别对应的待处理数据;
针对任一维度的待处理数据,按照所述任一维度对应的特征分析方式对该维度的待处理数据进行特征分析,以确定所述待处理数据中的异常数据。
3.根据权利要求2所述的方法,其特征在于,所述按照所述任一维度对应的特征分析方式对该维度的待处理数据进行特征分析,以确定所述待处理数据中的异常数据,包括以下至少一种方式:
从所述任一维度的待处理数据中,确定标记为空值的数据为异常数据;
从所述任一维度的待处理数据中,获取不属于所述任一维度对应的正常阈值范围的数据,作为所述异常数据;
从所述任一维度的待处理数据中,提取所述任一维度的待处理数据中的离群点,作为所述异常数据;
根据所述任一维度的待处理数据,确定所述任一维度的待处理数据的跳变梯度;确定跳变梯度大于设定的跳变梯度阈值的数据为异常数据;
从所述任一维度的待处理数据中,获取所述任一维度的待处理数据中数据持续不变的持续时长;在所述持续时长大于或等于设定倍数的采样周期的情况下,确定持续不变的数据为所述异常数据;所述采样周期为所述任一维度的待处理数据的采样周期;设定倍数大于或等于2。
4.根据权利要求3所述的方法,其特征在于,从所述任一维度的待处理数据中,提取所述任一维度的待处理数据中的离群点,包括:
对所述任一维度的待处理数据进行四分位距分析,以确定所述任一维度的待处理数据的四分之一分位数、四分之三分位数及四分位距;
根据所述四分之一分位数、四分之三分位数及四分位距,确定所述任一维度的正常数值范围;
从所述任一维度的待处理数据中,获取不属于所述任一维度的正常数值范围的待处理数据,作为所述离群点。
5.根据权利要求3所述的方法,其特征在于,还包括:
对所述任一维度的待处理数据进行四分位距分析,以确定所述任一维度的待处理数据的四分之一分位数和四分之三分位数;
确定所述四分之三分位数和所述四分之一分位数之间的差值作为所述设定的跳变梯度阈值。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述计算任务包括:生成目标对象的数据报表;所述获取计算任务所需的待处理数据,包括:
根据所述数据报表的信息项,获取确定所述信息项所需的目标数据表,作为所述待处理数据;
所述根据所述计算任务的计算意图,对所述待处理数据进行计算,以得到所述计算任务对应的计算结果,包括:
根据所述信息项的计算意图,对所述目标数据表进行计算,以得到所述信息项对应的指标数据。
7.根据权利要求6所述的方法,其特征在于,所述根据所述计算意图和所述异常数据,确定所述计算结果的置信度,包括:
在所述目标数据表的数量为一个,所述信息项的计算意图为计算指标的明细数据的情况下,根据所述目标数据表中异常数据的数量,确定所述明细数据的置信度。
8.根据权利要求6所述的方法,其特征在于,所述根据所述计算意图和所述异常数据,确定所述计算结果的置信度,包括:
在所述目标数据表的数量为一个,所述信息项的计算意图为计算指标的聚合数据的情况下,根据所述异常数据的数据量和所述目标数据表的数据总量,确定所述指标的聚合数据的置信度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里云计算有限公司,未经阿里云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210399961.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于鸡胚卵内注射的微生态制剂及其制备方法
- 下一篇:一种无伞柄飞行跟踪式雨伞
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理





