[发明专利]一种数据处理方法及系统有效
申请号: | 201210571950.0 | 申请日: | 2012-12-25 |
公开(公告)号: | CN103902544B | 公开(公告)日: | 2017-11-21 |
发明(设计)人: | 钱岭;郭磊涛;张宝海 | 申请(专利权)人: | 中国移动通信集团公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京鑫媛睿博知识产权代理有限公司11297 | 代理人: | 龚家骅 |
地址: | 100032 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种数据处理方法及系统,这种方法可以将大规模数据按照多个列分割成更细粒度的多维数据块,从而在针对数据查询时仅处理少数相关的数据块。本发明中的数据块是包括所有数据列(可不包含分区列)的数据块,这和现有的列数据库、列族数据库均不相同。这样在输出较多列时,可以获得更好的数据扫描性能。 | ||
搜索关键词: | 一种 数据处理 方法 系统 | ||
【主权项】:
一种数据处理方法,其特征在于,该方法包括:根据至少2个不同级别的分区键,创建元数据模型,元数据模型中定义的每个数据分区至少包含除分区键所在的数据列以外的所有数据列;接收到原始数据后,根据所述元数据模型对所述原始数据进行分区处理;按照级别从高到低的顺序,依次使用分区键对所述原始数据进行分区处理;其中,每次进行分区处理时所针对的数据,为上一次分区处理得到的数据分区,使用最高级别的分区键进行分区处理时所针对的数据,为所述原始数据,分区处理后得到的数据实体中包含除分区键所在的数据列以外的所有数据列。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团公司,未经中国移动通信集团公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201210571950.0/,转载请声明来源钻瓜专利网。