[发明专利]一种基于HAWQ记录有效数据的方法、装置和介质有效
| 申请号: | 201910911896.1 | 申请日: | 2019-09-25 |
| 公开(公告)号: | CN110659295B | 公开(公告)日: | 2023-03-24 |
| 发明(设计)人: | 谭博 | 申请(专利权)人: | 北京浪潮数据技术有限公司 |
| 主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/21 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 史翠 |
| 地址: | 100085 北京*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 基于 hawq 记录 有效 数据 方法 装置 介质 | ||
1.一种基于HAWQ记录有效数据的方法,其特征在于,包括:
调用预先设定的脚本程序,生成HAWQ基准表和HAWQ视图;
根据接收到的源数据对应的操作类型,对所述源数据设置相应的字段标识;
将所述源数据及其对应的字段标识作为一条记录添加至所述HAWQ基准表;
根据每条记录所对应的键值以及字段标识,从所述HAWQ基准表筛选出有效数据,并将所述有效数据存储至所述HAWQ视图中,以便于直接从所述HAWQ视图中调用有效数据;
所述字段标识包括版本字段和删除字段;
所述根据接收到的源数据对应的操作类型,对所述源数据设置相应的字段标识包括:
当源数据对应的操作类型为数据添加操作或数据修改操作时,则将所述源数据的版本字段的字段值加1,所述源数据的删除字段更新为无效删除标识;
当源数据对应的操作类型为数据删除操作时,则将所述源数据的版本字段的字段值加1,所述源数据的删除字段更新为有效删除标识。
2.根据权利要求1所述的方法,其特征在于,所述根据每条记录所对应的键值以及字段标识,从所述HAWQ基准表筛选出有效数据包括:
从所述HAWQ基准表中查询目标键值对应的所有目标记录;其中,同一个对象所对应的各条记录具有相同的键值;目标键值为所有键值中的任意一个键值;
根据各目标记录的字段值,从所有目标记录中选取出所述目标键值所对应的最新的目标记录;
当所述最新的目标记录的删除字段为有效删除标识时,则从所述HAWQ基准表中查询下一个键值对应的所有记录;
当所述最新的目标记录的删除字段为无效删除标识时,则将所述最新的目标记录作为所述目标键值的有效数据,直至遍历完所述HAWQ基准表中的所有记录,则结束操作。
3.根据权利要求2所述的方法,其特征在于,所述根据各目标记录的字段值,从所有目标记录中选取出所述目标键值所对应的最新的目标记录包括:
按照目标记录的字段值,对所有目标记录进行降序排列;
将排列后的第一条目标记录作为所述目标键值所对应的最新的目标记录。
4.根据权利要求1-3任意一项所述的方法,其特征在于,所述调用预先设定的脚本程序,生成HAWQ基准表和HAWQ视图包括:
根据项目个数需求,调用HAWQ基准表生成脚本程序,批量生成HAWQ基准表;
根据项目个数需求,调用HAWQ视图生成脚本程序,批量生成HAWQ基准表。
5.一种基于HAWQ记录有效数据的装置,其特征在于,包括生成单元、设置单元、添加单元和筛选单元;
所述生成单元,用于调用预先设定的脚本程序,生成HAWQ基准表和HAWQ视图;
所述设置单元,用于根据接收到的源数据对应的操作类型,对所述源数据设置相应的字段标识;
所述添加单元,用于将所述源数据及其对应的字段标识作为一条记录添加至所述HAWQ基准表;
所述筛选单元,用于根据每条记录所对应的键值以及字段标识,从所述HAWQ基准表筛选出有效数据,并将所述有效数据存储至所述HAWQ视图中,以便于直接从所述HAWQ视图中调用有效数据;
所述字段标识包括版本字段和删除字段;
所述设置单元包括第一更新子单元和第二更新子单元;所述第一更新子单元,用于当源数据对应的操作类型为数据添加操作或数据修改操作时,则将所述源数据的版本字段的字段值加1,所述源数据的删除字段更新为无效删除标识;所述第二更新子单元,用于当源数据对应的操作类型为数据删除时,则将所述源数据的版本字段的字段值加1,所述源数据的删除字段更新为有效删除标识。
6.一种基于HAWQ记录有效数据的装置,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序以实现如权利要求1至4任意一项所述基于HAWQ记录有效数据的方法的步骤。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至4任一项所述基于HAWQ记录有效数据的方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京浪潮数据技术有限公司,未经北京浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910911896.1/1.html,转载请声明来源钻瓜专利网。





