[发明专利]基于资源互斥调度模型的数据更新系统及方法

说明书

本发明提供了一种基于资源互斥调度模型的数据更新系统及方法，可应用于数据处理领域和金融领域，所述系统包含：资源缓存模块获取行情推送数据，根据行情推送数据的接收时间和行情推送数据中各行情数据的数据类别，将行情数据存入预设缓存队列；协调线程模块获取各产品的资源种类，根据资源种类构建各产品对应的特性数据；获取缓存队列中的行情数据，根据行情数据的资源种类和特性数据构建产品集合；根据产品集合的资源种类进行互斥调度，将各行情数据分发至不同的执行队列，通过执行队列对应的工作线程计算各产品的资源更新数据；合成计算模块获取各工作线程计算的资源更新数据，通过资源更新数据更新各产品中对应的资源。

技术领域

本发明涉及计算机资源调度领域，可应用于数据处理领域和金融领域，尤指一种基于资源互斥调度模型的数据更新系统及方法。

背景技术

行情和产品类数据往往是多堆垛的关系，例如产品价格生成服务每收到一条行情，都可能触发我行多个金融产品的价格的更新。如图1，行情Q1会触发产品P1、产品P2甚至产品PN的价格的更新。

而不同种类的产品所需要的参数资源不完全相同。如图2，行情Q1触发金融产品P1和金融产品P2价格的更新，金融产品P1和金融产品P2价格更新的过程中需要部分共性资源(白底黑字框)，也需要自己产品种类独有的资源(黑底白字框)。这些参数资源有实时变化的可能，要保证资源的可靠性准确性，不能过度依赖NOS缓存，需要实时读表获取最新参数资源。

通常的处理举例如下：接收到一笔行情Q1，为了生成金融产品P1和P2的结构，需要获取共性的资源表A和表N参数，还需要非共性资源表B、C、E、F、G的参数(参考图3)。获取处理产品的非共性资源花费了较高的处理时间。

以上处理存在几个缺点：

行情数据是不规律的推送过来，如图3，每一次推送都调起不同工作线程进行处理。每个工作线程的处理行情数据大小、类型等均不同，并且跟推送处理功能存在耦合。

每个工作线程需要访问和占用的资源无规律可循，线程间存在使用资源类型大量交集的现象，并且是以每一次报价为维度进行对应产品价格的更新。计算机资源使用效率低下。

发明内容

本发明目的在于提供一种基于资源互斥调度模型的数据更新系统及方法，提高处理大规模不同行情数据源的执行效率和对应计算机资源的使用效率。

为达上述目的，本发明所提供的一种基于资源互斥调度模型的数据更新系统，所述系统包含：资源缓存模块、协调线程模块和合成计算模块；所述资源缓存模块用于获取行情推送数据，根据所述行情推送数据的接收时间和所述行情推送数据中各行情数据的数据类别，将所述行情数据存入预设缓存队列；所述协调线程模块与所述资源缓存模块通信连接，用于获取各产品的资源种类，根据所述资源种类构建各产品对应的特性数据；获取缓存队列中的行情数据，根据所述行情数据的资源种类和所述特性数据构建产品集合；根据所述产品集合的资源种类进行互斥调度，将各行情数据分发至不同的执行队列，通过所述执行队列对应的工作线程计算各产品的资源更新数据；所述合成计算模块与所述协调线程模块通信连接，用于获取各工作线程计算的资源更新数据，通过所述资源更新数据更新各产品中对应的资源。

在上述基于资源互斥调度模型的数据更新系统中，优选的，所述协调线程模块还包含数据转换单元和构建单元；所述数据转换单元用于根据所述特性数据通过预设的特性数据字典将各产品转换为结构化数据格式的产品标识数据；所述构建单元用于根据所述行情数据的资源种类和所述特性数据，提取关联的产品标识数据，并根据提供的产品标识数据构建产品标识数据集合。

在上述基于资源互斥调度模型的数据更新系统中，优选的，所述资源缓存模块包含比较单元，所述比较单元用于当同一接收时间存在多条数据类别相同的行情数据时，以后收到的行情数据覆盖先收到的行情数据。