[发明专利]一种数据同步方法、装置、云平台、系统及存储介质在审
申请号: | 202110686565.X | 申请日: | 2021-06-21 |
公开(公告)号: | CN113407500A | 公开(公告)日: | 2021-09-17 |
发明(设计)人: | 张健 | 申请(专利权)人: | 北京金山云网络技术有限公司 |
主分类号: | G06F16/16 | 分类号: | G06F16/16;G06F16/178;G06F16/182 |
代理公司: | 北京开阳星知识产权代理有限公司 11710 | 代理人: | 袁义科 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 同步 方法 装置 平台 系统 存储 介质 | ||
1.一种数据同步方法,其特征在于,应用于云平台,所述方法包括:
接收终端发送的数据同步请求,所述数据同步请求携带待同步文件的文件名称;
将所述数据同步请求输入请求队列中,所述请求队列中包括一个或多个数据同步请求;
提取所述请求队列中的目标同步请求,并将所述目标同步请求转发至数据存储端;
接收所述数据存储端返回的所述文件名称对应的待同步文件,并对所述待同步文件执行存储操作。
2.根据权利要求1所述的方法,其特征在于,所述请求队列的数量为至少两个;
所述将所述数据同步请求输入请求队列中,包括:
确定每个所述请求队列的负载数据量;
将所述数据同步请求输入至至少两个所述请求队列中负载数据量最小的请求队列。
3.根据权利要求1所述的方法,其特征在于,所述请求队列的数量为至少两个;
所述将所述数据同步请求输入请求队列中,包括:
基于历史入队记录,确定与所述数据同步请求的请求参数相同的已入队同步请求,并确定所述已入队同步请求所在的目标请求队列;
将所述数据同步请求输入至所述目标请求队列。
4.根据权利要求1所述的方法,其特征在于,所述请求队列的数量为至少两个;
所述提取所述请求队列中的目标同步请求,包括:
确定每个所述请求队列的负载数据量;
从负载数据量最大的请求队列中提取所述目标同步请求。
5.根据权利要求1所述的方法,其特征在于,所述请求队列的数量为至少两个;
所述提取所述请求队列中的目标同步请求,包括:
基于历史出队记录,确定与已出队同步请求的请求参数相同的待出队的目标同步请求,并确定所述目标同步请求所在的目标请求队列;
从所述目标请求队列中提取所述目标同步请求。
6.根据权利要求1所述的方法,其特征在于,所述将所述数据同步请求输入请求队列中,包括:
提取所述数据同步请求的数据源标签;
将所述数据源标签与所述请求队列的数据源标签匹配,将匹配成功的请求队列确定为所述目标请求队列;
将所述数据同步请求输入至所述目标请求队列中。
7.根据权利要求1所述的方法,其特征在于,所述将所述目标同步请求转发至数据存储端,包括:
如果预先定义的存储桶内不包括所述文件名称,将所述目标同步请求转发至数据存储端。
8.根据权利要求1所述的方法,其特征在于,所述将所述目标同步请求转发至数据存储端,包括:
如果预先定义的存储桶内包括所述文件名称,且包括所述文件名称对应的预设强制参数,将所述目标同步请求转发至数据存储端。
9.根据权利要求1所述的方法,其特征在于,所述数据存储端基于预先确定的分片数,对所述待同步文件进行分片,并向所述云平台发送待同步文件的分片数据。
10.根据权利要求9所述的方法,其特征在于,所述对所述待同步文件执行存储操作,包括:
对所述分片数据进行流式存储,直至对最后接收到的所述文件名称对应的分片数据完成存储。
11.根据权利要求1所述的方法,其特征在于,还包括:
确定对所述待同步文件执行存储操作的执行结果和所述执行结果对应的反馈信息;
通过预先定义的回调地址,将所述执行结果对应的反馈信息反馈至所述终端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司,未经北京金山云网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110686565.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置