[发明专利]一种基于缓存机制的数据交换系统和方法

说明书

技术领域

本发明涉及计算机互联网技术领域，尤其涉及一种基于缓存机制的数据交换系统和方法。

背景技术

在目前的电子商务平台上，上游业务系统向下游系统交换数据时一般采用调用网页服务（Webservice）接口的方式，如图1所示，Webservice接口的处理包括三大步骤：

第一，解析数据量大的XML报文，其中报文的大小不固定，几K到几百K不等；

第二，处理业务数据拼装实体参数，调用外部接口处理复杂业务逻辑等；

第三，数据库操作处理，插入业务数据库，持久化数据。

可见，现有方式中上游业务系统与下游系统之间没有缓存余地，二者之间的数据必须一次性传输，并且接口的业务复杂度高，容易交换失败。

发明内容

本发明提供了一种基于缓存机制的数据交换系统，能够在上游业务系统与下游系统之间设置缓存余地，减轻接口的业务复杂度高，从而提高交换成功率。

本发明还提供了一种基于缓存机制的数据交换方法，能够在上游业务系统与下游系统之间设置缓存余地，减轻接口的业务复杂度高，从而提高交换成功率。

本发明的技术方案是这样实现的：

一种基于缓存机制的数据交换系统，包括：

上游业务系统，用于向缓存系统写入数据报文、所述数据报文对应的任务类型和业务主键，并将业务主键的状态设置为待处理状态；

缓存系统，用于保存所述数据报文及对应的任务类型和业务主键；并保存所述任务主键的状态；

数据中心，用于从所述缓存系统读取并保存待处理状态的业务主键所对应的数据报文，将该数据报文组装成下游系统所需的数据，将组装完毕的数据同步至下游系统；还用于将缓存系统中该业务主键的状态修改为已处理状态，并删除缓存系统中保存的该数据报文及对应的任务类型和业务主键。

上述系统中，上游业务系统可以将数据报文对应的任务类型作为键（Key），将数据报文对应的业务主键作为域（Field），将数据报文作为值（Value），并将Key、Field和Value的对应关系写入缓存系统；并将Field的状态设置为待处理状态。

上述系统中，缓存系统可以包括：

Redis缓存，用于保存所述Key、Field和Value的对应关系；

数据库，用于保存Field的状态；

云存储系统，用于当所述Redis缓存出现故障时，保存上游业务系统所写入的Key、Field和Value的对应关系。

上述数据中心可以包括：

异步任务调度模块，用于从所述数据库获取待处理状态的业务主键，根据该业务主键与已知的任务类型，从所述Redis缓存或云存储系统获取对应的数据报文，如果获取成功，则调度数据加工模块对所述数据报文进行校验，并将数据库中该业务主键的状态修改为已处理状态，删除Redis缓存或云存储系统中所保存的该任务类型、业务主键和数据报文的对应关系；

数据加工模块，用于在所述异步任务调度模块的调度下，对异步任务调度模块获取的数据报文进行校验，将校验完成的数据报文及与任务类型和业务主键的对应关系保存入存储模块；

存储模块，用于保存任务类型、业务主键和数据报文的对应关系。

上述异步任务调度模块还可以用于，调度所述数据加工模块对存储模块存储的数据报文进行组装；

数据加工模块还可以用于，在异步任务调度模块的调度下，将存储模块存储的数据报文组装成下游系统所需的数据，将组装完毕的数据保存入存储模块，并将组装完毕的数据同步至下游系统；

所述存储模块，还可以用于存储数据加工模块组装完毕的数据。

上述异步任务调度模块还可以用于，实时扫描所述存储模块保存的内容，如果出现异常则重新调度；

所述异步任务调度模块还可以用于，在数据加工模块将校验完成的数据报文及与任务类型和业务主键的对应关系保存入存储模块之前，判断存储模块中是否已存有该业务主键，如果没有，则指令数据加工模块将校验完成的数据报文及与任务类型和业务主键的对应关系保存入存储模块。

上述上游业务系统还可以用于，向缓存系统写入数据报文、对应的任务类型和业务主键之前，判断缓存系统中是否已存有该业务主键，如果没有，则向缓存系统写入数据报文、对应的任务类型和业务主键。

上述系统还可以包括监控系统，用于监控上游业务系统写入内容及数据中心读取内容时的响应时间及状态，还用于监控数据中心保存的数据报文的数据量。

一种基于缓存机制的数据交换方法，包括：