[发明专利]数据仓库中的维度处理方法和装置在审
| 申请号: | 201410510713.2 | 申请日: | 2014-09-28 |
| 公开(公告)号: | CN104239567A | 公开(公告)日: | 2014-12-24 |
| 发明(设计)人: | 洪超 | 申请(专利权)人: | 北京国双科技有限公司 |
| 主分类号: | G06F17/30 | 分类号: | G06F17/30 |
| 代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 李志刚;吴贵明 |
| 地址: | 100086 北京市海淀区*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据仓库 中的 维度 处理 方法 装置 | ||
1.一种数据仓库中的维度处理方法,其特征在于,在所述数据仓库中存储有预先创建的第一维度表和预先创建的第二维度表,其中,所述第一维度表用于存储所述数据仓库中的所有历史数据,所述第二维度表用于根据所述第一维度表进行更新以存储所述第一维度表中最近一个维度处理时间周期的数据,所述方法包括:
获取所述数据仓库的待更新数据;以及
将所述待更新数据添加至所述第二维度表中以对所述第二维度表进行更新,并基于所述待更新数据对所述第一维度表进行更新。
2.根据权利要求1所述的方法,其特征在于,基于所述待更新数据对所述第一维度表进行更新包括:
获取所述待更新数据;
获取第三维度表,其中,所述第三维度表是将所述待更新数据添加至所述第二维度表中生成的维度表;以及
将所述第三维度表添加至所述第一维度表对所述第一维度表进行更新。
3.根据权利要求1所述的方法,其特征在于,获取所述数据仓库的待更新数据包括:
在所述数据仓库中查找数据源,其中,所述数据源存储在所述数据仓库中;以及
对所述数据源进行去重处理,得到待更新数据。
4.根据权利要求1所述的方法,其特征在于,基于所述待更新数据对所述第一维度表进行更新包括:
将所述待更新数据添加所述第一维度表;
判断所述第一维度表是否存在唯一索引;
在所述第一维度表存在唯一索引的情况下,判断所述唯一索引的属性是否是可忽略唯一值;
在所述唯一索引属性是可忽略唯一值的情况下,所述数据仓库对所述第一维度表执行自动执行去重处理;
在所述第一维度表不存在唯一索引的情况下或所述唯一索引属性不是可忽略唯一值的情况下,所述数据仓库通过加载预设的表数据对所述第一维度表执行去重处理;以及
通过对所述第一维度表执行去重处理对所述第一维度表进行更新。
5.根据权利要求1所述的方法,获取所述数据仓库的待更新数据之前,所述方法还包括:
获取所述第二维度表的代理键,其中,所述第二维度表的代理键包括多个数值;
确定所述第二维度表的代理键中的最大数值;
将所述第二维度表的代理键中的最大数值设置为所述第二维度表的种子;
查找所述第一维度表的代理键,其中,所述第一维度表的代理键包括多个数值;
确定所述第一维度表的代理键中的最大数值;
将所述第一维度表的代理键中的最大数值设置为所述第一维度表的种子;
判断所述第二维度表的代理键中的最大数值是否大于所述第一维度表的代理键中的最大数值;
在所述第二维度表的代理键中最大数值大于所述第一维度表的代理键中最大数值的情况下,通过所述第二维度表种子设置所述第一维度表种子以使所述第一维度表和所述第二维度表种子相同;
在所述第二维度表的代理键中最大数值小于所述第一维度表的代理键中最大数值的情况下,通过所述第一维度表种子设置所述第二维度表种子以使所述第二维度表和所述第一维度表种子相同;
其中,基于所述待更新数据对所述第一维度表进行更新包括:
在确定所述第二维度表的种子和所述第一维度表的种子相同之后,获取第四维度表,其中,将所述待更新数据添加至所述第二维度表中经过去重处理后,所述第二维度表中得到新添加的数据,所述第四维度表是用于存储所述第二维度表中新添加的数据的维度表;以及
将所述第四维度表添加至所述第一维度表对所述第一维度表进行更新。
6.一种数据仓库中的维度处理装置,其特征在于,在所述数据仓库中存储有预先创建的第一维度表和预先创建的第二维度表,其中,所述第一维度表用于存储所述数据仓库中的所有历史数据,所述第二维度表用于根据所述第一维度表进行更新以存储所述第一维度表中最近一个维度处理时间周期的数据,所述装置包括:
获取单元,用于获取所述数据仓库的待更新数据;以及
更新单元,用于将所述待更新数据添加至所述第二维度表中以对所述第二维度表进行更新,并基于所述待更新数据对所述第一维度表进行更新。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京国双科技有限公司,未经北京国双科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410510713.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:攀爬机器人
- 下一篇:一种重型特种车辆驾驶室结构





