[发明专利]数据查询方法及装置

说明书

本公开提供一种数据查询方法及装置，涉及数据查询领域，能够解决减轻数据查询受限于内存大小的问题。具体技术方案为：将数据划分为独立业务数据和公共基础数据，将所述独立业务数据存储于至少一个独立业务数据库中，将所述公共基础数据存储于共享主数据库中；当接收到查询请求后，根据所述查询请求查询所述独立业务数据库中的数据，并通过定义的远程数据表获取所述共享主数据库的数据后返回查询结果。本发明实施例可以用于系统查询性能的提升。

技术领域

本公开涉及数据查询领域，尤其涉及一种数据查询方法及装置。

背景技术

规模较大的软件系统或者分布式系统，因为数据量很大，单一数据库往往无法满足。为了保证系统的数据库读写性能，通常会根据业务将数据进行划分，划分成很多独立数据库来存储不同分类的主题数据。因此在进行数据查询时，就经常需要从不同的数据库关联查询数据。在需要多结果集进行分页查询的情况下，必须同时查询多个数据库的数据，在内存进行最小堆运算，计算出正确结果集返回给用户；往往需要进行数据库的路由及实时运算，才能完成跨库的查询操作。这样跨库查询操作就会受限于内存的大小，当需要计算的数据量增大时，内存往往成为跨库查询性能的瓶颈。

发明内容

本公开实施例提供一种数据查询方法及装置，能够解决数据查询受限于内存大小的问题。所述技术方案如下：

根据本公开实施例的第一方面，提供一种数据查询方法，该方法包括：将数据划分为独立业务数据和公共基础数据，将所述独立业务数据存储于至少一个独立业务数据库中，将所述公共基础数据存储于共享主数据库中；当接收到查询请求后，根据所述查询请求查询所述独立业务数据库中的数据，并通过定义的远程数据表获取所述共享主数据库中的数据后返回查询结果。

该实施例中通过数据划分、建立存储公共基础数据存的共享主数据库对数据进行冗余处理，查询时独立业务数据库通过定义远程数据表获取所述共享主数据库的实时数据，这就提升了系统查询的性能，解决了数据查询受限于内存大小的问题。

在一些实施例中，独立业务数据可以按照业务类型分库存储，具体的，可以将所述独立业务数据可以按照至少一种业务类型分别存储于至少一个独立业务数据库中，一种业务类型对应一个独立业务数据库；在一些实施例中，各独立业务数据库基于所述共享主数据库中的数据结构，具有同样的远程数据表结构。在这些实施例中可以根据实际业务查询的需要，高效进行分页数据查询。

在一些实施例中，所述独立业务数据库对所述共享主数据库仅有只读权限。这样可以避免了多份数据操作对数据的一致性造成破坏。

在一些实施例中，通过定义的远程数据表获取所述共享主数据库的数据，包括：在需要进行扩库查询时，可以通过上述独立业务数据库关联的远程数据表获取所述共享主数据库的数据。

根据本公开实施例的第二方面，提供一种数据查询装置，包括：管理模块，存储模块、查询模块和收发模块，其中，管理模块用于将数据划分为独立业务数据和公共基础数据；独立业务数据存储于所述存储模块中的至少一个独立业务数据库中，公共基础数据存储于所述存储模块中的共享主数据库中；收发模块用于接收查询请求；查询模块用于根据所述查询请求查询所述独立业务数据库中的数据，并通过定义的远程数据表获取所述共享主数据库的数据；所述发模块还用于返回查询结果。

通过数据划分、建立存储公共基础数据存的共享主数据库对数据进行冗余处理，查询时独立业务数据库通过定义远程数据表获取所述共享主数据库的实时数据，这就提升了系统查询的性能，减轻了数据查询受限于内存大小的问题。

在一些实施例中，独立业务数据可以按照业务类型分库存储，具体的，可以将所述独立业务数据按照至少一种业务类型分别存储于至少一个独立业务数据库中，一种业务类型对应一个独立业务数据库；在一些实施例中，各独立业务数据库基于所述共享主数据库中的数据结构，具有同样的远程数据表结构。在这些实施例中可以根据实际业务查询的需要，高效进行分页数据查询。