[发明专利]数据处理方法、装置、设备及存储介质有效
申请号: | 202110496553.0 | 申请日: | 2021-05-07 |
公开(公告)号: | CN113204602B | 公开(公告)日: | 2023-08-01 |
发明(设计)人: | 陈振强;靳峥;赵鑫 | 申请(专利权)人: | 星环信息科技(上海)股份有限公司 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/22;G06F16/242 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 200233 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 设备 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
响应于窗口函数调用指令,获取所述窗口函数调用指令包含的目标字段;
根据所述目标字段的哈希值确定逻辑表单;
对所述逻辑表单进行窗口函数处理;
所述目标字段为分组字段,所述根据所述目标字段的哈希值确定逻辑表单,包括:
根据原数据和所述分组字段获取目标分组数据,所述目标分组数据为所述原数据中任意一个记录的所述分组字段的内容;
根据哈希函数确定所述目标分组数据的哈希值;
根据所述哈希值确定所述目标分组数据所属的目标逻辑表单,所述目标逻辑表单包括具有相同的哈希值的至少一个分组数据;
相应的,所述对所述逻辑表单进行窗口函数处理,包括:
根据所述窗口函数调用指令携带的窗口指令类型和所述目标逻辑表单得到窗口处理结果;
所述根据哈希函数确定所述目标分组数据的哈希值之前,还包括:
根据预设的逻辑表单数量确定哈希函数的哈希值,其中,所述预设的逻辑表单数量小于所述目标分组数据的类型数量。
2.根据权利要求1所述的方法,其特征在于,根据所述窗口函数调用指令携带的窗口指令类型和所述目标逻辑表单得到窗口处理结果,包括:
若所述窗口函数调用指令携带的窗口指令类型为第一类型,获取所述窗口函数调用指令包含的排序字段;
根据原数据、所述目标分组数据和所述排序字段,确定目标排序数据,所述目标排序数据为所述原数据中所述目标分组数据记录的排序字段的内容;
在所述目标逻辑表单中,根据所述目标排序数据和所述目标分组数据进行排序。
3.根据权利要求2所述的方法,其特征在于,所述根据所述目标排序数据和所述目标分组数据进行排序,包括:
在所述目标逻辑表单中,根据所述目标分组数据对记录进行分组,得到记录分组,使每组记录分组的目标排序数据相同;
在每个记录分组中,根据目标排序数据对记录顺序进行排序。
4.根据权利要求1所述的方法,其特征在于,在根据哈希函数确定所述目标分组数据的哈希值之前,还包括:
配置目标分组数据与所述哈希值的映射关系;
相应的,所述根据哈希函数确定所述目标分组数据的哈希值,包括:
根据所述映射关系确定所述目标分组数据的哈希值。
5.根据权利要求1所述的方法,其特征在于,所述根据所述窗口函数调用指令携带的窗口指令类型和所述目标逻辑表单得到窗口处理结果,包括:
若所述窗口函数调用指令携带的窗口指令类型为第二类型,分别获取多个目标逻辑表单的统计结果;
根据目标统计结果和所述第二类型确定窗口处理结果。
6.一种服务器,其特征在于,包括处理器和存储器,所述存储器用于存储指令,当所述指令执行时使得所述处理器执行以下操作:
响应于窗口函数调用指令,获取所述窗口函数调用指令包含的目标字段;
根据所述目标字段的哈希值确定逻辑表单;
对所述逻辑表单进行窗口函数处理;
所述目标字段为分组字段,所述根据所述目标字段的哈希值确定逻辑表单,包括:
根据原数据和所述分组字段获取目标分组数据,所述目标分组数据为所述原数据中任意一个记录的所述分组字段的内容;
根据哈希函数确定所述目标分组数据的哈希值;
根据所述哈希值确定所述目标分组数据所属的目标逻辑表单,所述目标逻辑表单包括具有相同的哈希值的至少一个分组数据;
相应的,所述对所述逻辑表单进行窗口函数处理,包括:
根据所述窗口函数调用指令携带的窗口指令类型和所述目标逻辑表单得到窗口处理结果;
所述根据哈希函数确定所述目标分组数据的哈希值之前,还包括:
根据预设的逻辑表单数量确定哈希函数的哈希值,其中,所述预设的逻辑表单数量小于所述目标分组数据的类型数量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于星环信息科技(上海)股份有限公司,未经星环信息科技(上海)股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110496553.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:强化亚硫酸铵氧化的方法
- 下一篇:卡片个人化卡基存取系统及其控制方法