[发明专利]数据仓库的模型表级别判定方法及装置在审
申请号: | 201810475388.9 | 申请日: | 2018-05-17 |
公开(公告)号: | CN110569313A | 公开(公告)日: | 2019-12-13 |
发明(设计)人: | 李建星 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06K9/62 |
代理公司: | 11438 北京律智知识产权代理有限公司 | 代理人: | 王辉;阚梓瑄 |
地址: | 100195 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 模型表 集合 聚类运算 数据仓库 分配 数据库技术 存储介质 电子设备 分配结果 级别标识 级别判定 指标数据 分级 预设 自动化 采集 | ||
本发明的实施例提供了一种数据仓库的模型表级别判定方法、装置、电子设备及存储介质,涉及数据库技术领域。该方法包括:采集所述数据仓库中各模型表的多个预设指标的指标数据;划分多个模型表级别,并建立所述模型表级别对应的模型表集合以及为各所述模型表集合分配一模型表作为初始元素;根据各所述初始元素对各所述模型表进行聚类运算,并根据所述聚类运算的结果,将各所述模型表分配至对应的所述模型表集合中;根据模型表分配结果,为各所述模型表分配对应的级别标识。本发明实施例的技术方案能够实现模型表的自动化分级。
技术领域
本发明涉及数据库技术领域,具体而言,涉及一种数据仓库的模型表级别判定方法、数据仓库的模型表级别判定装置、电子设备以及计算机可读存储介质。
背景技术
目前,企业内部大多建立了数据仓库,用于企业业务的日常数据分析、报表、数据挖掘等不同数据需求。建立数据仓库的核心是构建一套基于公司业务的数据模型,通过数据模型将不同业务环节的数据信息,通过一定的建模方法和理论,构建成最终的模型表,进而可以对外提供数据查询、分析、检索、数据挖掘等服务。
目前的数据仓库的模型一般会按加工顺序和粒度划分为多个层级,但是没有对模型表的重要性按照不同级别进行划分,而实际工作中模型表级别是非常有价值的属性。例如,在对数据仓库进行系统维护中需要对模型表进行数据备份,对级别较高的模型表应该采取优先保障、重点监测、全量备份等措施。再例如,数据仓库运行中的资源分配时,对于级别较高的模型表应该适当分配较多的资源,比如计算节点资源、存储资源、网络访问并发资源等等。总的来说,通过对模型表进行合理分级,能够实现按照不同级别提供更有效的管理方法,从而全面提升系统的稳定性和使用价值。
因此,如何去判定一个数据仓库中的模型表级别便成为一个亟待解决的技术问题。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本发明背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本发明实施例的目的在于提供一种数据仓库的模型表级别判定方法、数据仓库的模型表级别判定装置、电子设备以及计算机可读存储介质,进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的一个或者多个问题。
根据本公开的一个方面,提供一种数据仓库的模型表级别判定方法,包括:
采集所述数据仓库中各模型表的多个预设指标的指标数据;
划分多个模型表级别,并建立所述模型表级别对应的模型表集合以及为各所述模型表集合分配一模型表作为初始元素;
根据各所述初始元素对各所述模型表进行聚类运算,并根据所述聚类运算的结果,将各所述模型表分配至对应的所述模型表集合中;
根据模型表分配结果,为各所述模型表分配对应的级别标识。
在本公开的一种示例性实施例中,所述预设指标包括字段数量、记录数量、任务数量、来源表数量、本统计周期查询次数、本统计周期下载次数、脚本运行时长、本统计周期更新次数、本统计周期均使用人数、用户评论数中的多种。
在本公开的一种示例性实施例中,为各所述模型表集合分配一模型表作为初始元素包括:
对于每一所述模型表,计算该所述模型表的所有所述指标数据之和作为该模型表的第一判断数据;
根据各所述第一判断数据,对各所述模型表进行排序;
根据各所述模型的排序结果,选取位于预设次序的所述分配至各所述模型表集合作为初始元素。
在本公开的一种示例性实施例中,根据各所述初始元素对各所述模型表进行聚类运算包括:
对于每一所述模型表,计算该所述模型表与各所述模型表集合的向量质心的距离;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810475388.9/2.html,转载请声明来源钻瓜专利网。