[发明专利]海量数据存储方法及海量数据存储系统在审
申请号: | 201710947918.0 | 申请日: | 2017-10-12 |
公开(公告)号: | CN108304438A | 公开(公告)日: | 2018-07-20 |
发明(设计)人: | 曾勇;许毅文;郑雄威;张红卫 | 申请(专利权)人: | 深圳市天下房仓科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 深圳国新南方知识产权代理有限公司 44374 | 代理人: | 王勇 |
地址: | 518000 广东省深圳市龙华新区创业*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种海量数据存储方法及海量数据存储系统,其中,该方法包括:主MQ集群接收外部发送的待存储数据,并将待存储数据交互给比较模块;比较模块判断缓存集群是否存在待存储数据;若缓存集群中存在待存储数据,则比较模块不处理待存储数据;若缓存集群中不存在待存储数据,则比较模块将待存储数据发送至数据库和缓存集群进行同步存储。本发明先将外部接收到的数据存储至主MQ集群,因此,通过这种异步方式减轻了数据库的入库压力。此外,比较模块判定当前待存储数据属于新的数据时,才将其存储至数据库,从而提升了数据库的数据有效存储率。进一步,相同的数据不进行处理,则提升了数据的处理速率。 | ||
搜索关键词: | 待存储数据 集群 比较模块 缓存 数据库 海量数据存储系统 海量数据存储 存储 发送 数据存储 数据有效 同步存储 异步方式 外部 判定 入库 | ||
【主权项】:
1.一种海量数据存储方法,其特征在于,其包括如下步骤:主MQ集群接收外部发送的待存储数据,并将所述待存储数据交互给比较模块;所述比较模块判断所述缓存集群是否存在所述待存储数据;若所述缓存集群中存在所述待存储数据,则所述比较模块不处理所述待存储数据;若所述缓存集群中不存在所述待存储数据,则所述比较模块将所述待存储数据发送至数据库和所述缓存集群进行同步存储。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市天下房仓科技有限公司,未经深圳市天下房仓科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710947918.0/,转载请声明来源钻瓜专利网。