[发明专利]基于数据仓库的数据处理方法和装置有效
申请号: | 201910689636.4 | 申请日: | 2019-07-29 |
公开(公告)号: | CN110569315B | 公开(公告)日: | 2020-11-10 |
发明(设计)人: | 颜博 | 申请(专利权)人: | 北京创鑫旅程网络技术有限公司 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/22;G06F16/2458 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张晓霞;刘芳 |
地址: | 100015 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 数据仓库 数据处理 方法 装置 | ||
1.一种基于数据仓库的数据处理方法,其特征在于,应用于服务器,所述服务器包括有数据仓库,所述数据仓库包括应用层、中间层和基础层,所述中间层包括整合层和汇总层;所述方法包括:
接收所述应用层发送的数据查询请求,所述数据查询请求用于指示查询待查询数据;
在所述基础层中确定与所述待查询数据对应的第一实体,所述第一实体为用于存储原始数据的数据表;
将所述第一实体中的原始数据发送给所述中间层,并通过所述中间层对所述原始数据进行处理,生成处理数据,所述处理数据为临时数据;
将所述处理数据发送给所述应用层,并通过所述应用层对所述处理数据进行处理,得到所述待查询数据;
所述在所述基础层中确定与所述待查询数据对应的第一实体,包括:
根据所述待查询数据,生成计算关系图,所述计算关系图中包括基础层的实体、所述应用层的实体和计算规则,以及所述中间层的虚拟实体和计算规则,其中,所述计算规则用于表示对数据的处理操作以及处理操作的执行顺序、数据来源及输出数据;
根据所述计算关系图,在所述基础层中确定与所述待查询数据对应的第一实体。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述第一实体,在所述中间层中确定与所述待查询数据对应的虚拟实体,所述虚拟实体为用于存储所述处理数据的数据表;
将所述处理数据存储至所述中间层的所述虚拟实体;
在通过所述应用层对所述处理数据进行处理,得到所述待查询数据之后,删除所述虚拟实体中存储的所述处理数据。
3.根据权利要求2所述的方法,其特征在于,所述根据所述第一实体,在所述中间层中确定与所述待查询数据对应的虚拟实体,包括:
根据所述第一实体,在所述整合层中确定与所述待查询数据对应的第一虚拟实体;
根据所述整合层中的第一虚拟实体,在所述汇总层中确定与所述待查询数据对应的第二虚拟实体。
4.根据权利要求2或3所述的方法,其特征在于,所述将所述第一实体中的原始数据发送给所述中间层,并通过所述中间层对所述原始数据进行处理,生成处理数据,包括:
将所述第一实体中的原始数据发送给所述整合层,并通过所述整合层对所述原始数据进行处理,生成第一处理数据;
将所述第一处理数据发送给所述汇总层,并通过所述汇总层对所述第一处理数据进行处理,生成第二处理数据;
所述将所述处理数据发送给所述应用层,并通过所述应用层对所述处理数据进行处理,得到所述待查询数据,包括:
通过所述汇总层将所述第二处理数据发送给所述应用层,并通过所述应用层对所述第二处理数据进行处理,得到所述待查询数据。
5.根据权利要求4所述的方法,其特征在于,所述将所述处理数据存储至所述中间层的所述虚拟实体,包括:
分别将所述第一处理数据存储至所述整合层的第一虚拟实体,并将所述第二处理数据存储至所述汇总层的第二虚拟实体。
6.根据权利要求5所述的方法,其特征在于,所述删除所述虚拟实体中存储的所述处理数据,包括:
分别删除所述整合层的第一虚拟实体中的第一处理数据和所述汇总层的第二虚拟实体中的第二处理数据。
7.根据权利要求6所述的方法,其特征在于,删除所述整合层的第一虚拟实体中的第一处理数据,包括:
在通过所述汇总层将所述第二处理数据发送给所述应用层后,通过所述汇总层向所述整合层发送第一释放指令;
根据所述第一释放指令,删除所述整合层的第一虚拟实体中的第一处理数据。
8.根据权利要求6或7所述的方法,其特征在于,删除所述汇总层的第二虚拟实体中的第二处理数据,包括:
在所述应用层对所述第二处理数据进行处理,得到所述待查询数据之后,通过所述应用层向所述汇总层发送第二释放指令;
根据所述第二释放指令,删除所述汇总层的第二虚拟实体中的第二处理数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京创鑫旅程网络技术有限公司,未经北京创鑫旅程网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910689636.4/1.html,转载请声明来源钻瓜专利网。