[发明专利]数据同步方法、装置、计算机设备及存储介质有效
申请号: | 202010037664.0 | 申请日: | 2020-01-14 |
公开(公告)号: | CN111262923B | 公开(公告)日: | 2022-08-19 |
发明(设计)人: | 丁晶晶 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
主分类号: | H04L67/1095 | 分类号: | H04L67/1095;H04L67/02;H04L67/56;H04L47/56;H04L47/6275 |
代理公司: | 深圳众鼎专利商标代理事务所(普通合伙) 44325 | 代理人: | 周燕君 |
地址: | 518000 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 同步 方法 装置 计算机 设备 存储 介质 | ||
1.一种数据同步方法,其特征在于,所述数据同步方法包括:
实时监控客户端集群,所述客户端集群包括N个客户端,N为大于1的自然数;
若检测到N个客户端的集群中的任一客户端发送数据请求,则将最先发送数据请求的客户端确定为主机,将其余的N-1个客户端确定为从机;
对所述主机发出的数据请求对应的数据建立索引,并基于所述从机发出的数据请求对应的数据构建长度为N-1的阻塞队列;
采用网络代理的方式截取所述主机发送的数据请求中的HTTP报文,校验所述HTTP报文中包含的头消息是否存在所述索引中;所述主机的发送和响应被劫持后,劫持其余N-1个从机的响应同步主机的响应;所述从机根据所述索引选择性地接收主机的同步数据;
若所述HTTP报文中包含的头消息不存在所述索引中,则将所述主机返回的响应数据填充至所述阻塞队列对应的死锁队列中,以使所述从机的数据与所述主机的数据同步。
2.如权利要求1所述的数据同步方法,其特征在于,所述校验所述HTTP报文中包含的头消息是否存在所述索引中,包括:
提取所述HTTP报文中包含的URL和接口参数;
将所述URL和所述接口参数按照预设的组合方式进行组合得到查询索引;
基于所述查询索引判断所述HTTP报文中包含的头消息是否存在所述索引中。
3.如权利要求1所述的数据同步方法,其特征在于,在所述校验所述HTTP报文中包含的头消息是否存在所述索引中之后,所述数据同步方法还包括:
若所述HTTP报文中包含的头消息存在所述索引中,则从所述索引中取出数据;
将所述数据返回给所述从机,以使所述从机的数据与所述主机的数据同步。
4.如权利要求1所述的数据同步方法,其特征在于,在所述以使所述从机的数据与所述主机的数据同步之后,所述数据同步方法还包括:
对所述死锁队列进行数据释放以截断所述从机的数据外发。
5.如权利要求4所述的数据同步方法,其特征在于,所述对所述死锁队列进行数据释放以截断所述从机的数据外发,包括:
若所述阻塞队列数据被读取N-1次,则对所述阻塞队列进行删除;
若监测到所述阻塞队列被填充的时间大于预设的超时阈值,则对所述阻塞队列进行删除。
6.一种数据同步装置,其特征在于,所述数据同步装置包括:
集群监控模块,用于实时监控客户端集群,所述客户端集群包括N个客户端,N为大于1的自然数;
主从机确定模块,用于在检测到N个客户端的集群中的任一客户端发送数据请求时,将最先发送数据请求的客户端确定为主机,将其余的N-1个客户端确定为从机;
队列建立模块,用于对所述主机发出的数据请求对应的数据建立索引,并基于所述从机发出的数据请求对应的数据构建长度为N-1的阻塞队列;
索引校验模块,用于采用网络代理的方式截取所述主机发送的数据请求中的HTTP报文,校验所述HTTP报文中包含的头消息是否存在所述索引中;
数据同步模块,用于在所述HTTP报文中包含的头消息不存在所述索引中时,将所述主机返回的响应数据填充至所述阻塞队列对应的死锁队列中,以使所述从机的数据与所述主机的数据同步;
所述主机的发送和响应被劫持后,劫持其余N-1个从机的响应同步主机的响应;所述从机根据所述索引选择性地接收主机的同步数据。
7.如权利要求6所述的数据同步装置,其特征在于,所述索引校验模块包括:
报文提取单元,用于提取所述HTTP报文中包含的URL和接口参数;
索引获取单元,用于将所述URL和所述接口参数按照预设的组合方式进行组合得到查询索引;
检验单元,用于基于所述查询索引判断所述HTTP报文中包含的头消息是否存在所述索引中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010037664.0/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置