[发明专利]数据处理方法、装置、电子设备及存储介质在审
申请号: | 202210800662.1 | 申请日: | 2022-07-08 |
公开(公告)号: | CN115080597A | 公开(公告)日: | 2022-09-20 |
发明(设计)人: | 贺伟;吕信 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/27 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 方高明 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 电子设备 存储 介质 | ||
本公开关于一种数据处理方法、装置、电子设备及存储介质。所述方法包括:接收客户端发送的数据处理请求,数据处理请求用于指示进行第N次查询,携带目标游标参数;目标游标参数是在第N‑1次查询时生成的编码参数,N为大于1的正整数;从游标参数与键的映射关系中,查询得到与目标游标参数对应的目标键,目标键指示在分布式键值数据库中进行第N‑1次查询的结束位置;根据目标键对分布式键值数据库执行第N次查询。根据本公开的技术方案,按照原生命令的需求配置游标参数,存储游标参数与键的对应关系,从而可以基于目标游标参数准确地解析得到查询的起始位置,使分布式键值数据库具有很好的兼容性。
技术领域
本公开涉及互联网技术领域,尤其涉及一种数据处理方法、装置、电子设备、计算机可读存储介质、计算机程序产品。
背景技术
伴随着NoSQL数据库(非关系型的数据库)的快速发展,Redis(远程字典服务)数据库广泛应用于电商、社交、游戏、教育、金融、传媒等领域,很多内容平台的分布式KV数据库都兼容Redis协议。
以Redis SCAN命令(用于增量地迭代查询集合中的元素的命令)为例。SCAN命令采用高位进位加法的方式对第一维数组进行遍历,每次遍历会将该数组的索引作为游标(cursor)返回。但是,由于分布式KV数据库无法兼容原生SCAN命令,通常需要将原生SCAN命令中的游标从整数替换成当前迭代返回给客户端的最后一个key(字符串)。而使用非Redis原生命令,导致业务代码通常需要使用定制的SDK(Software Development Kit,软件开发工具包)。因此,随着NoSQL数据库的快速发展和应用,亟需提供一种能够提升分布式KV数据库与不同协议的兼容性的方案。
发明内容
本公开提供一种数据处理方法、装置、电子设备、计算机可读存储介质、计算机程序产品,以至少解决相关技术中分布式KV数据库与不同协议的兼容性的问题。本公开的技术方案如下:
根据本公开实施例的第一方面,提供一种数据处理方法,包括:
接收客户端发送的数据处理请求,所述数据处理请求用于指示进行第N次查询,所述数据处理请求携带目标游标参数;所述目标游标参数是在第N-1次查询时生成的编码参数,并在第N-1次查询完毕后发送至所述客户端的,所述N为大于1的任意正整数;
从已存储的游标参数与键的映射关系中,查询得到与所述目标游标参数对应的目标键,所述目标键指示在分布式键值数据库中进行第N-1次查询的结束位置;
以所述目标键为起始位置,对所述分布式键值数据库执行第N次查询。
在其中一个实施例中,所述方法还包括:
在第N-1次查询时,获取第N-1次查询对应的唯一性的游标标识;
确定第一时间信息对应的第一时间指示参数,所述第一时间信息表示执行第N-1次查询的时间信息;
根据所述游标标识和所述第一时间指示参数,生成所述目标游标参数;
在第N-1次查询完毕后,将所述目标游标参数发送至所述客户端。
在其中一个实施例中,所述方法还包括:
在第N-1次查询完毕后,确定第N-1次查询的结束位置所指示的结束键;
确定与所述第一时间指示参数对应的生存时间值;
拼接所述生存时间值以及所述目标游标参数,得到游标键,建立所述游标键和所述结束键之间的映射关系。
在其中一个实施例中,所述方法还包括:
在满足游标清理条件的情况下,根据满足游标清理条件时的第二时间信息,以及预设的游标生存时长,确定清理时间区间,所述游标生存时长用于指示所述映射关系的可存储时长;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210800662.1/2.html,转载请声明来源钻瓜专利网。