[发明专利]数据存储系统及其操作方法有效
申请号: | 201710296541.7 | 申请日: | 2017-04-28 |
公开(公告)号: | CN108804234B | 公开(公告)日: | 2023-05-09 |
发明(设计)人: | 宋增宽;宋立鑫 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/27 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 赵翠萍;张颖玲 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储系统 及其 操作方法 | ||
本发明公开了一种数据存储系统及其操作方法。其中数据存储系统包括多个处理机,其中,每个处理机包括共享内存,多个处理机之间的共享内存存储的数据相互同步,其中方法包括:接收数据操作请求;当数据操作请求为读请求时,根据读请求生成哈希值,并根据哈希值在共享内存中进行查找;在共享内存中查找到对应的数据时,返回查找到的数据;在共享内存中未查找到对应的数据时,从数据库中查找对应的数据并返回。由此,本发明实施例可以保证绝大多数读请求的操作时间是读内存时间级,最大限度支持了低延迟响应需求下请求的并发度,并显著的降低了技术成本预算,避免了不必要高性能硬件机器的消耗。
技术领域
本发明涉及数据存储技术领域,特别涉及一种数据存储系统的操作方法、数据存储系统。
背景技术
在数据存储领域中,工业界有着面向普适场景(即普遍适应的场景)的成熟解决方案,主要分为关系型数据库(如SQL(Structured Query Language,结构化查询语言))和非关系型数据库(如NoSQL(Not Only SQL,非关系型的数据库))两类,前者以MySQL(是一个关系型数据库管理系统)为代表,后者以Redis(是一个开源的使用ANSI C(是由美国国家标准协会(ANSI)及国际标准化组织(ISO)推出的关于C语言的标准)语言编写、支持网络、可基于内存亦可持久化的日志型、Key(键)-Value(值)数据库)/Memcache(是一套分布式的高速缓存系统)为代表。关系型数据库结构化思想,操作简便,具有丰富的特性支持,但较为复杂,并发支持能力不足;非关系型数据库更为轻量,以key-value形式进行存储,对并发有更好的支持。在分布式环境下,业界对数据库进行网络封装,以供业务方进行调用。
相关技术中,在普适场景下常用的业务存储方案可如下:将处理机的进程内存作为数据的缓存,并将非关系型数据库作为二级缓存,而关系型数据库用以数据落地。可以理解的是,这种存储方案的思路就是在分布式环境中,业务方通过网络请求并经过一定路由规则后访问存储方,由此可见,这种存储策略能够适用于绝大多数的业务场景。
然而,上述这种存储方案将处理机中的进程内存作为数据的缓存,一旦数据在内存中命中,就可以大大降低了数据访问的时间。然而,这种存储方案的技术问题在于分布式路由的无状态策略,会导致同一数据源的请求,可能会分散到不同的处理机之上,然而不同的处理机中进程内存所存储的数据是不同的,因此这就严重制约了内存缓存的利用率。举例而言,假设来自数据源A的第一次请求在处理机B中的进程内存中查找到了相应的缓存数据,降低了数据访问的时间,然而由于分布式路由的无状态策略,该数据源A的第二次请求可能会被分配至处理机C之上,因此在第二次请求时,由于处理机C中未缓存有相应的数据,因此还是需要从数据库中读取相应的数据,从而严重制约了内存缓存的利用率。
发明内容
本发明的目的旨在至少在一定程度上解决上述技术中的技术问题之一。
为此,本发明的第一个目的在于提出一种数据存储系统的操作方法。该方法可以极大地提高了共享内存缓存的利用率,保证了绝大多数读请求的操作时间是读内存时间级,最大限度支持了低延迟响应需求下请求的并发度,并显著的降低了技术成本预算,避免了不必要高性能硬件机器的消耗。
本发明的第二个目的在于提出一种数据存储系统。
本发明的第三个目的在于提出一种处理机。
本发明的第四个目的在于提出一种存储介质。
为达到上述目的,本发明第一方面实施例提出了一种数据存储系统的操作方法,所述数据存储系统包括多个处理机,其中,每个处理机包括共享内存,所述多个处理机之间的共享内存存储的数据相互同步,所述方法包括:
接收数据操作请求;
当所述数据操作请求为读请求时,根据所述读请求生成哈希值,并根据所述哈希值在所述共享内存中进行查找;
在所述共享内存中查找到对应的数据时,返回查找到的数据;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710296541.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置