[发明专利]业务数据的推送方法及装置

说明书

技术领域

本申请涉及互联网领域，具体而言，涉及一种业务数据的推送方法及装置。

背景技术

在内部运营业务系统中执行用户查询数据时，系统可以提供基于数据库的数据检索功能，在数据库中的数据量较少的情况下(例如一百万数据以内的情况)，该基于数据库的数据查询功能可以快速响应用户的查询需求。但随着系统数据库中数据量的增长，例如数据量在超过一百万之后，上述基于数据库的查询功能已经无法快速响应用户的查询需求，即系统对用户查询请求的响应速度快速下降，因此，系统提供的数据查询功能在数据量超过一定限度的情况下性能较差。

为了解决上述问题，现有技术可以采用搜索引擎技术来提高查询功能的性能，该技术的响应速度不会随着数据量的增长而有明显的性能下降。具体的，现有技术通过创建业务系统中的数据库数据和搜索引擎服务器之间的数据同步关系来实现数据查询功能，同时搜索引擎服务器主动以一定的频率访问业务系统中的数据库服务器上数据库变更的数据，并以SQL查询的方式查询数据库中的静态数据，当业务系统中的数据库服务器上数据库数据发生变更时构建新数据的索引。具体的可以采用如下步骤实现构建索引的流程：

步骤S1，当业务系统操作数据库数据变更的时候，比如执行新增、修改、删除数据库数据，数据库触发器会记录数据库中被变更数据对象的标识号码ID，并将其保存在一张日志表里。

步骤S2，搜索引擎服务器启动一个定时钟任务，定时循环的从步骤S1的日志表里读取变更数据对象的标识号码ID，搜索引擎根据该标识号码ID来查询多个表组合的数据库视图，从而获取到对应的数据。

步骤S3，搜索引擎服务器根据步骤S2获取到的数据来构建索引。

上述现有技术实现了，当业务系统中的数据库中的数据发生变更后，搜索引擎服务器可以以一定的时间间隔(例如1-5分钟左右)从业务系统中的数据库中读取这些变更数据的标识号码ID，并根据该标识号码ID获取对应的变更数据，并建立变更数据的索引。

但上述方案存在如下问题：首先，业务系统中的数据库与搜索引擎服务器之间数据同步的时间延迟过长，用户需要过一定的时间间隔(例如1-5分钟左右)之后才能利用搜索引擎服务器查询到业务系统中的数据库中发生变更的数据；其次，以SQL查询的方式获取业务系统中的数据库中的静态数据，在特定的业务场景下有严重的性能问题。比如在业务系统中的某个业务场景下，如果在短时间内，有大量的数据变更的话，搜索引擎服务器在从业务系统中的服务器获取到数据之后构建增量索引会超过预定的时间间隔的延迟；另外，随着数据量越来越大，SQL查询性能也会越来越慢，从而降低了搜索引擎服务器获取业务系统中的服务器中更新数据的效率。

目前针对相关技术的搜索引擎服务器定时读取业务系统的数据库服务器中的数据库数据的方式，会导致在业务系统中的数据库数据变更较大的情况下，搜索引擎服务器和业务系统中的数据库之间同步数据不一致的问题，目前尚未提出有效的解决方案。

发明内容

针对相关技术的搜索引擎服务器定时读取业务系统的数据库服务器中的数据库数据的方式，会导致在业务系统中的数据库数据变更较大的情况下，搜索引擎服务器和业务系统中的数据库之间同步数据不一致的问题，本申请的主要目的在于提供一种业务数据的推送方法及装置，以解决上述问题。

为了实现上述目的，根据本申请的一个方面，提供了一种业务数据的推送方法，该方法包括：在检测到客户端的业务层调用数据对象访问层进行业务数据的变更操作时，截取该进行变更操作的业务数据，以得到变更数据；按照推送规则来解析截取到的变更数据，以获取需要执行推送任务的推送数据；在数据库事务提交之后，异步启动推送任务，以发送推送数据至搜索引擎服务器。

进一步地，在截取该进行变更操作的业务数据，以得到变更数据之前，方法还包括：预设客户端中用于进行截取操作的截取条件和用于确定推送任务的命名空间，以获取配置文件；根据配置文件中的截取条件来启动截取业务数据的操作。

进一步地，按照推送规则来解析截取到的变更数据，以获取需要执行推送任务的推送数据包括：解析变更数据，以获取变更数据的属性，其中，在获取到的属性指示确定变更数据是实体对象的情况下，解析实体对象，如果解析结果与预设的命名空间相同，则标记实体对象为需要执行推送任务的推送数据；在获取到的属性指示确定变更数据是SQL语句的情况下，提取SQL语句中的命名空间，并将SQL语句中的命名空间与预设的命名空间进行比较，在相同的情况下，则标记SQL语句的操作数据为需要执行推送任务的推送数据。