[发明专利]跨节点的晚期物化方法和装置有效
| 申请号: | 201410796561.7 | 申请日: | 2014-12-18 |
| 公开(公告)号: | CN104462479B | 公开(公告)日: | 2017-11-24 |
| 发明(设计)人: | 周平高 | 申请(专利权)人: | 杭州华为数字技术有限公司 |
| 主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F3/06 |
| 代理公司: | 北京同立钧成知识产权代理有限公司11205 | 代理人: | 杨贝贝,黄健 |
| 地址: | 310053 浙江省杭州*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 节点 晚期 物化 方法 装置 | ||
1.一种跨节点的晚期物化方法,应用于集群数据库系统,所述集群数据库系统包括多台物理机,所述物理机包括多个节点,其特征在于,所述方法包括:
获取第一节点中数据的第一元组信息;其中,所述第一元组信息用于指示所述数据与存储所述数据的所述第一节点之间的映射关系,以及,所述数据存储在所述第一节点中的列;所述第一节点为所述多个节点中的任一个节点;
根据所述第一元组信息确定所述数据中的第一数据为与所述第一节点预设的第一过滤条件匹配的数据,并确定所述数据中的第二数据为与第二节点预设的第二过滤条件匹配的数据;所述第二节点为所述多个节点中除所述第一节点之外的任一节点;
根据所述第一元组信息对所述第一数据和所述第二数据分别进行物化,并将物化后的第二数据输出至所述第二节点,通过所述第二节点处理物化后的第二数据。
2.根据权利要求1所述的方法,其特征在于,所述第一元组信息包括列标识和节点标识,所述节点标识用于指示存储所述数据的节点为第一节点,所述列标识用于指示所述第一节点中存储所述数据的列。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述第一元组信息确定所述数据中的第二数据为与第二节点预设的第二过滤条件匹配的数据,具体包括:
根据预设条件将所述第一元组信息中与所述预设条件匹配的第二元组信息输出至第二节点;其中,所述第二元组信息对应的数据为与所述第二节点具有关联关系的第三数据;所述第二元组信息中的节点标识用于指示存储所述第三数据的节点为第一节点,所述第二元组信息中的列标识用于指示所述第三数据存储在所述第一节点中的列;
接收所述第二节点返回的第三元组信息,所述第三元组信息为所述第二节点从所述第二元组信息中确定的与所述第二过滤条件匹配的元组信息;所述第三元组信息中的节点标识用于指示存储所述第二数据的节点为第一节点,所述第三元组信息中的列标识用于指示所述第二数据存储在所述第一节点中的列;
根据所述第三元组信息从所述第三数据中确定所述第二数据。
4.根据权利要求3所述的方法,其特征在于,所述根据所述第一元组信息对所述第二数据进行物化,并将物化后的第二数据输出至所述第二节点,具体包括:
根据所述第三元组信息中的节点标识和所述第三元组信息的列标识将所述第二数据从所述第一节点对应的磁盘写入所述第一节点对应的内存,并将写入所述内存的第二数据输出至所述第二节点。
5.一种跨节点的晚期物化装置,应用于集群数据库系统,所述集群数据库系统包括多台物理机,所述物理机包括多个节点,其特征在于,所述装置包括:
获取模块,用于获取第一节点中数据的第一元组信息;其中,所述第一元组信息用于指示所述数据与存储所述数据的所述第一节点之间的映射关系,以及,所述数据存储在所述第一节点中的列;所述第一节点为所述多个节点中的任一个节点;
处理模块,用于根据所述第一元组信息确定所述数据中的第一数据为与所述第一节点预设的第一过滤条件匹配的数据,并确定所述数据中的第二数据为与第二节点预设的第二过滤条件匹配的数据;所述第二节点为所述多个节点中除所述第一节点之外的任一节点;
物化模块,用于根据所述第一元组信息对所述第一数据和所述第二数据分别进行物化,并将物化后的第二数据输出至所述第二节点,通过所述第二节点处理物化后的第二数据。
6.根据权利要求5所述的装置,其特征在于,所述第一元组信息包括列标识和节点标识,所述节点标识用于指示存储所述数据的节点为第一节点,所述列标识用于指示所述第一节点中存储所述数据的列。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州华为数字技术有限公司,未经杭州华为数字技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410796561.7/1.html,转载请声明来源钻瓜专利网。





