[发明专利]一种数据定时缓存下发方法及系统装置

说明书

本发明公开了一种数据定时缓存下发方法及系统装置，其中所述的方法包括：运营管理平台获取更新的业务数据下发至数据库；运营管理平台调用定时更新模块；定时更新模块通知中间缓存服务模块定时更新业务数据；中间缓存服务模块从数据库中拉取更新的业务数据发送至内存存储。本发明应用于互联网或软件公司内部作为数据统一缓存管理和下发的数据缓存下发方法及系统装置。应用在运营管理平台、配置平台等需要实时改动数据并且与之对应的客户端并发访问量比较高的业务系统中。本发明减少了包头等地方臃肿的数据，减少了流量耗费，加快了传输速率；极大降低了沟通成本；不会存在读取DB时访问速度缓慢、阻塞、锁等问题，做到了数据及时性。

技术领域

本发明涉及一种数据缓存技术，尤其涉及一种应用于互联网或软件公司内部作为数据统一缓存管理和下发的数据缓存下发方法及系统装置。应用在运营管理平台、配置平台等需要实时改动数据并且与之对应的客户端并发访问量比较高的业务系统中。

背景技术

目前，大部分公司在使用的内部管理系统、配置平台等，都会在线上直接读取DB，这样虽说数据同步较好，及时性高，但是在HTTP协议带来的一部分流量耗费的同时更大的问题是网络IO并发量较大的时候，DB查询速度跟不上，大量读取和写入同一个库带来的死锁、阻塞等问题将会造成灾难性后果。另一种方法是直接使用缓存中间件提供额外的HTTP接口来访问，这样带来的问题是数据更新不及时，额外的流量耗费，多余的沟通成本，并且不能做到同步更新。

由上可知，现有技术中主要存在如下两个技术问题：

1.线上直接读取DB，查询速度跟不上，大量读取和写入同一个库带来的死锁、阻塞等问题；

2.使用缓存中间件提供额外的HTTP接口来访问，数据更新不及时不能做到同步更新。

发明内容

为解决上述背景技术中指出的技术问题，本发明提供了一种用一个中间缓存服务将与管理平台对接的关系型数据库中所有需要的数据读取到该服务所在内存中并做好数据整理和内存分块的数据缓存下发方法及系统装置，其具体的技术方案如下：

第一方面，一种数据定时缓存下发方法，所述方法包括：

运营管理平台获取更新的业务数据下发至数据库；

运营管理平台调用定时更新模块；所述定时更新模块是一个独立的proxy服务，专门提供内部接口来代理通知事件并定向转发到其他服务和进程；

定时更新模块通知中间缓存服务模块定时更新业务数据；

中间缓存服务模块从数据库中拉取更新的业务数据发送至内存存储。

结合第一方面，在第一方面可能的实现方式中的第二种情况为，所述线上服务端通过所述中间缓存服务模块的内部接口调用内存中存储的业务数据。所述内部接口基于TCP协议，应用层经过一系列的自定义封装，实现了自己的序列化和反序列化，以及可以由接口描述文件自动转换成代码类，省去了HTTP接口带有的各种包头，数据传输速率快。

第二方面，一种数据定时缓存下发系统，所述系统包括：

运营管理平台，用于操作数据库生成用户的运营数据和内容，调用定时更新模块，更新业务数据；

定时更新模块，用于提供内部接口来代理通知事件并定向转发到其他服务和进程，通知中间缓存服务模块定时更新业务数据；

中间缓存服务模块，用于从数据库中拉取更新的各类型业务数据发送至相应业务类型的内存分块中存储；

数据库，用于存储用户的运营数据和内容及更新的业务数据；

内存分块，用于存储更新的各类型业务数据。

第三方面，一种数据定时缓存下发系统装置，所述系统装置包括：