[发明专利]数据多维分析模型生成方法和装置在审
申请号: | 202011058895.6 | 申请日: | 2020-09-30 |
公开(公告)号: | CN112069155A | 公开(公告)日: | 2020-12-11 |
发明(设计)人: | 耿绪博;陈亮;刘海清 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/26;G06F16/28 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 多维 分析 模型 生成 方法 装置 | ||
本申请公开了一种数据多维分析模型生成方法和装置,涉及大数据技术领域。该方法的一具体实施方式包括:基于全量物理模型、指标和至少一个维度,形成初始事实表集合和至少一个维度表集合;响应于至少一个维度表集合与初始事实表集合之间存在交集,将与初始事实表集合存在交集的维度表集合融入初始事实表集合,生成新的事实表集合;将所有至少一个维度表集合中不与初始事实表集合存在交集的维度表集合赋值给有效集;基于有效集以及新的事实表集合,确定最终的有效集以及最终的事实表集合;响应于确定最终的有效集中不存在维度表集合,则将最终的事实表集合作为数据多维分析模型。该实施方式提升了多维分析建模的分析效率。
技术领域
本申请涉及计算机技术领域,具体涉及大数据技术领域,尤其涉及一种数据多维分析模型生成方法、装置、电子设备以及计算机可读介质。
背景技术
数据多维分析模型生成技术是指在数据多维分析中对已有的数据存储模型进行再次建模生成适用于数据多维分析的数据模型的技术。在现有的数据多维分析系统中,如果数据存储在关系性数据库中,需要分析人员以维度(Dimension)和度量(Measure)为基本概念建立多维度的数据立方体模型,以便进行数据分析。
现有技术中,一般采用SQL(structured query language,结构化查询语句)脚本(SQL脚本是包含一或多个SQL命令的SQL语句)将数据表转换成一个数据视图,通过数据视图进行数据多维分析。但是由于分析的数据量会随着维度的变化而变化,在维度较多时,抽取视图的SQL脚本的性能也会随之下降,从而分析效率变低。
发明内容
提供了一种数据多维分析模型生成方法、装置、电子设备以及计算机可读介质。
根据第一方面,提供了一种数据多维分析模型生成方法,上述方法包括:基于全量物理模型、指标和至少一个维度,形成初始事实表集合和至少一个维度表集合;响应于至少一个维度表集合与初始事实表集合之间存在交集,将与初始事实表集合存在交集的维度表集合融入初始事实表集合,生成新的事实表集合;将至少一个维度表集合中所有与新的事实表集合不存在交集的维度表集合赋值给有效集;基于有效集以及新的事实表集合,确定最终的有效集以及最终的事实表集合;响应于确定最终的有效集中不存在维度表集合,则将最终的事实表集合作为数据多维分析模型。
根据第二方面,提供了一种数据多维分析模型生成装置,该装置包括:成形单元,被配置成基于全量物理模型、指标和至少一个维度,形成初始事实表集合和至少一个维度表集合;生成单元,被配置成响应于至少一个维度表集合与初始事实表集合之间存在交集,将与初始事实表集合存在交集的维度表集合融入初始事实表集合,生成新的事实表集合;赋值单元,被配置成将至少一个维度表集合中所有与新的事实表集合不存在交集的维度表集合赋值给有效集;确定单元,被配置成基于有效集以及新的事实表集合,确定最终的有效集以及最终的事实表集合;成模单元,被配置成响应于确定最终的有效集中不存在维度表集合,则将最终的事实表集合作为数据多维分析模型。
根据第三方面,提供了一种电子设备,该电子设备包括:至少一个处理器;以及与至少一个处理器通信连接的存储器,其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行如第一方面任一实现方式描述的方法。
根据第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,计算机指令用于使计算机执行如第一方面任一实现方式描述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011058895.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:采用水泥土浆进行工程钻孔封堵方法
- 下一篇:一种打磨带式带钢侧边毛刺清除装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置