[发明专利]基于数据并发能力的数据流通方法及系统有效
申请号: | 201711435819.0 | 申请日: | 2017-12-26 |
公开(公告)号: | CN108021701B | 公开(公告)日: | 2021-08-10 |
发明(设计)人: | 汤奇峰;谢磊 | 申请(专利权)人: | 上海数据交易中心有限公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/2455;G06F16/2453 |
代理公司: | 上海翰信知识产权代理事务所(普通合伙) 31270 | 代理人: | 张维东 |
地址: | 200436 上海*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 数据 并发 能力 流通 方法 系统 | ||
1.一种基于数据并发能力的数据流通方法,其特征在于:
多个数据供给方为数据需求方供给数据,所述数据需求方请求数据时,根据该次请求的数据量结合数据需求方和数据供给方的并发能力,执行多次选择选择数据供给方,每次采用低价优先策略、质高优先策略、轮询策略、随机选择策略中任意一种数据聚合的方式选择为该次请求提供数据的数据供给方,并向为该次请求提供数据的数据供给方发起请求,
所述低价优先策略为:
步骤1,计算根据心跳包的方法确定的数据供给方和数据需求方配置的数据供给方的交集,
步骤2,选择交集中价格最低的数据供给方为数据需求方提供数据,
所述质高优先策略为:
步骤1,计算根据心跳包的方法确定的数据供给方和数据需求方配置的数据供给方的交集,
步骤2,选择交集中质量最好的数据供给方为数据需求方提供数据,
所述随机选择策略为:
步骤1,计算根据心跳包的方法确定的数据供给方和数据需求方配置的数据供给方的交集,并将交集转换为列表,计算列表的长度n,
步骤2,随机产生一个小于等于n的正整数a,选择所述列表中第a个数据供给方为数据需求方提供数据,
所述轮询策略为:
步骤1,数据需求方第一次向数据供给方发起轮询请求时会被分配一个随机的值n,
步骤2,计算根据心跳包的方法确定的数据供给方和数据需求方配置的数据供给方的交集,并对交集中的每个数据供给方,根据其访问ip和端口基于md5运算得到交集中的各数据供给方的md5值,其中,计算所得的md5值为数值,
步骤3,选择交集中数据供给方的md5值大于n中md5值最小的数据供给方为数据需求方提供数据,如果交集中数据供给方的md5值均小于n,则选择md5值最小的数据供给方为数据需求方提供数据。
2.根据权利要求1所述的基于数据并发能力的数据流通方法,其特征在于:
其中,所述数据需求方请求数据时,首先查询数据缓存模块中是否存储有请求需要的数据,若有,则从所述数据缓存模块中获取数据,若否,则通过数据聚合的方式从数据供给方获得数据,并将从数据供给方请求的数据缓存到所述数据缓存模块中。
3.根据权利要求2所述的基于数据并发能力的数据流通方法,其特征在于:
其中,所述数据缓存模块存储数据时采用分布式缓存。
4.根据权利要求2或3所述的基于数据并发能力的数据流通方法,其特征在于:
其中,对所述数据缓存模块缓存的数据设置存储时间,并对到达所述存储时间的缓存的数据进行删除。
5.根据权利要求3所述的基于数据并发能力的数据流通方法,其特征在于:
其中,对数据进行缓存时,对源数据的value值进行编码处理后存入所述数据缓存模块。
6.根据权利要求1所述的基于数据并发能力的数据流通方法,其特征在于:
其中,所述数据需求方向所述数据供给方请求数据前,通过心跳包的方式确定当前可用的数据供给方。
7.根据权利要求6所述的基于数据并发能力的数据流通方法,其特征在于:
其中,在确定数据聚合方式时,通过网页的形式为数据需求方提供选择数据聚合方式的接口,设定预定时间,定时拉取数据需求方选择的数据聚合方式,在所述预定时间内,数据需求方向所述数据供给方请求数据时,均按照该次选择的数据聚合方式进行数据配送。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海数据交易中心有限公司,未经上海数据交易中心有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711435819.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:汽车应急启动电源
- 下一篇:一种计算机机房综合维护服务系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置